+ 
华为 职业 认证 通过 者 权益 
通过 任 一 项 华为 职业 认证 ， 您 即 可 在 华为 在 线 学 习 网 站 (htfp;//earning.huawei.com/cn) 享有 如 下 特权 : 
。 ”1、 华 为 E-learning 课程 学 习 
o AR: 所 有 华为 职业 认证 E-Learning 课 程 ， 扩 展 您 在 其 他 技术 领域 的 技术 知识 
方式 : 请 提交 您 的 “华为 账号 ”和 注册 账号 的 “email 地 址 ”到 Learning@huawei.com Æ5EfR Re 
华为 培训 教材 下 载 
AR: 华为 职业 认证 培训 教材 + 华为 产品 技术 培训 教材 ， 覆 盖 企 业 网 络 、 存 储 、 安 全 等 诸多 领 
方式 : BREJE IMA, HA “ENEN-AREN , ERARE TRA PM 
华为 在 线 公 开课 (LVC) 优 先 参与 
AR: 企业 网 络 、UC&C、 安 全 、 存 储 等 诸多 领域 的 职业 认证 课程 ， 华 为 讲师 授课 ， 天 班 A 数 有 限 
方式 : 开 班 计划 及 参与 方式 请 详 见 LVC 排 期 : 


http://support.huawei.com/learning/NavigationAction!createNavi#nailid]=®16 
学 习 工 具 eNSP 
ENSP [Enterprise Network Simulation Platform), 是 由 华为 提供 的 免费 的 6] 坟 展 的 、 图 形 化 网 络 仿 





真 工具 。 主 要 对 企业 网 路 由 器 和 交换 机 进行 硬件 模拟 ， 完 美 呈现 真实 设备 实景 了 同时 也 支持 大 型 网 络 
模拟 ， 让 大 家 在 没有 真实 设备 的 情况 下 也 能 够 进行 实验 测试 。 
另外 , 华为 建立 了 知识 分 享 平台 华为 认证 论坛 。 您 可 以 在 线 与 华为 技术 专家 交流 技术 ， 与 其 他 考生 分 享 考试 
经 验 ， 一 起 学 习 华为 产品 技术 。_(_ http://support.huawei.comyeaePimunity/bbsy/list 2247.html ) 





HUAWEI TECHNOLOGIES CO., LTD. Huawei Confidential 





华为 认证 网 络 工程 师 系 列 教程 ~ HCNA 
华为 网 络 存储 工程 师 认 证 


Huawei Certified Network Associate-Storage 





NG 


HUAWEI 
华为 技术 有 限 公司 




















版 权 声明 

版 权 所 有 © 华为 技术 有 限 公司 2014。 保留 一 切 权 利 。 本 书 所 有 内 容 受 版 权 法 保护 ， 
华为 拥有 所 有 版 权 , 但 注 明 引用 其 他 方 的 内 容 除 外 。 未 经 华为 技术 有 限 公司 事先 书面 许 
可 ,任何 人 、 任 何 组 织 不 得 将 本 书 的 任何 内 容 以 任何 方式 进行 复制 、 经 销 、 翻 印 、 存 储 
于 信息 检索 系统 或 使 用 于 任何 其 他 任何 商业 目的 。 版 权 所 有 侵权 必 究 。 

商标 声明 


QD 
Huawe 和 其 他 华为 商标 均 为 华为 技术 有 限 公 司 的 商标 。 


本 文档 提 及 的 其 他 所 有 商标 或 注册 商标 ， 由 各 自 的 所 有 人 拥有 。 


华为 认证 网 络 工程 师 系列 教程 ~- HCNA 
华为 网 络 存储 工程 师 认 证 
第 2.0 版 本 


华为 认证 系统 介绍 


依托 华为 公司 雄厚 的 技术 实力 和 专业 的 培训 体系 ,华为 认证 考虑 到 不 同 客户 对 ICT 
技术 不 同 层 次 的 需求 ， 致 力 于 为 客户 提供 实战 性 、 专 业 化 的 技术 认证 。 根据 ICT 技术 
的 特点 和 客户 不 同 层次 的 需求 ， 华 为 认证 为 客户 提供 面向 十 三 个 方向 的 四 级 认证 体系 。 

HCNA-Storage (Huawei Certified Network Associate-Storage， 华 为 网 络 存储 工 
程 师 认证 ) 主要 面向 网 络 存储 维护 工程 师 ， 以 及 准备 参加 HCNAStorage 认证 考试 的 
人 员 ; 希望 掌握 SAN 存储 系统 与 网 络 基 本 原理 和 华为 SAN 存储 阵 系统 管理 、 部 署 与 维 
护 能 力 的 人 员 。HCNA 认证 在 内 容 上 涵盖 存储 基础 知识 、RAID 技术 与 应 用 、 存 储 网 络 
技术 与 应 用 、 华 为 存储 产品 与 解决 方案 、 存 储 系统 管理 和 基本 配置 、 存 储 主机 连接 与 多 
路 径 配 置 、SAN 网 络 与 存储 系统 日 常 维护 。 

HCNP-Storage (Huawei Certified Network Professional-Storage, 华为 认证 网 络 存 
储 资深 工程 师 ) 主 要 面向 企业 级 网 络 存储 维护 工程 师 、 专 家 工程 师 以 及 希望 系统 深入 
SAN 存储 、 统 一 存储 、 数 据 保 护 技 术 与 部 署 的 人 员 。 

HCNP-Storage 包括 CUSN (ConstructingsUnifying Storage Network 构建 统一 存 
储 网 络 ) 、CBDS(Constructing Big Data Solution 构建 大 数据 解决 方案 )、CDPS 
(Constructing Data Protection System 构建 数据 保护 系统 ) 三 个 部 分 。 内 容 上 涵盖 
SAN, NAS 统一 存储 原理 、 架 构 和 组 件 , 存储 数据 处 理 与 通信 协议 (SCSI FC, iSCSI) 
原理 及 应 用 , 存储 系统 数据 可 靠 性 与 业务 连续 性 保障 技术 存储 与 主流 OS 平台 连接 与 应 
用 ， 存 储 网 络 郊 余 技术 及 应 用 ，SAN、 集 群 NAS 网 络 规划 与 方案 部 署 ， 虚 拟 快 照 、 
LUNCopy、 复 制 的 原理 和 部 署 ,网 络 存储 虚拟 化 技术 及 应 用 ， 存 储 虚 拟 化 系统 原理 、 
部 署 和 异 构 资源 管理 ， 备 份 网 络 及 备份 恢复 技术 及 应 用 ， 华 为 数据 保护 方案 构建 、 部 署 
与 管理 ， 华 为 数据 容 灾 方 案 及 典型 应 用 场景 ， 华 为 存储 系统 、 网 络 、 方 案 的 故障 诊断 与 
处 理 方 法 。 

HCIE-Storage. (Huawei Certified Internetwork Expert--Storage， 华 为 认证 互联 网 
络 存储 专家 ) 旨 在 培养 能 够 熟练 掌握 各 种 存储 技术 ; 精通 华为 存储 产品 的 维护 、 诊 断 和 
故障 排除 。 

华为 认证 协助 您 打开 行业 之 窗 ， 开 启 改变 之 门 ， 屹 立 在 ICT 世界 的 潮 头 浪 尖 ! 
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简介 
本 书 为 HCNA-Storage 认证 培训 教程 ,适用 于 华为 认证 网 络 存储 工程 师 以 及 准 备 参 
加 HCNA-Storage 考试 的 学 员 或 者 希望 系统 掌握 华为 网 络 存 储 产 品 与 技术 的 学 员 。 


内 容 描 述 


本 书 共 包含 10 个 Module ,系统 地 介绍 了 华为 存储 技术 及 其 应 用 和 常见 的 故障 处 理 
Module1 介绍 了 IT 基础 设施 与 数据 中 心 ， 存 储 应 用 环境 。 机械 硬盘 以 及 SSD 硬盘 


SE 
/人 9 


结构 及 实现 原理 ， 主 机 应 用 环境 。 
Module2 介绍 了 RAID 分 类 及 原理 ，RAID2.0+ 技 术 。 
Modules 介绍 存储 阵列 系统 的 组 成 ， 通 用 技术 以 及 存储 阵列 的 应 用 。 
Module4 介绍 DAS 存储 基础 知识 ，SC3I 协议 ，SAN 存储 基础 知识 ，FC 连接 和 协 
IP SAN 组 成 和 组 网 连接 ，iSCSI 协议 ， 


ER, SAN 存储 的 应 用 。 
Module5 介绍 IP SAN 产生 与 发 展 的 背景 ; 
FC 协议 与 TCP 协议 融合 ， 华 IP SAN 存储 的 实现 与 应 用 。 
Module6 介绍 ISM 功能 及 安装 方法 ， 存 储 初 始 化 配置 流程 ， 存 储 端 基 本 配置 ， 主 机 
端 基本 配置 ， 存 储 运 维 管理 方法 。 
Module7 介绍 NAS 的 产生 与 发 展 ，NAS 系统 组 成 与 部 件 ，NAS 文件 共享 协议 
CIFS,NFS,NAS 文件 系统 IO 与 性 能 ，SAN 与 NAS 比较 ， 华 为 实现 与 应 用 。 
Module8 介绍 大 数据 的 楚 本 概念 ,对象 存 储 技术 ， 大 数据 处 理 技术 ,华为 大 数据 实 


践 。 
部 署 与 商业 模式 ， 核 心 技术 与 价值 ， 解 决 


db =E 
ZERE 


Module9 介绍 备份 概念 及 拜年 结构 ， 备 份 技术 ,备份 策略 ， 华 为 备份 实现 与 应 用 ， 


绍 云 计算 的 概念 与 
成 所 有 Module， 学 完 本 课程 之 后 将 具备 华为 SAN 存储 产品 基本 


容 灾 。 
， 以 胜任 网 络 存储 工程 师 或 系统 管理 员 的 工作 岗位 。 


Module10 


方案 。 
本 书 将 引导 学 员 完 
规划 和 安装 部 署 能 
读者 必 备 知识 背景 
本 课程 为 华为 网 络 存储 认证 基础 课程 ， 阅 读本 书 的 读者 应 首先 具备 计算 机 基础 知 


识 、 硬 件 染 构 和 软件 基本 原理 、 软 件 的 基本 操作 。 




















本 书 常用 图 标 


以 太 网 交换 机 


光纤 交换 机 
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目标 


。 学 习 完 本 课程 后 ， 您 将 能 人 
o 了 解 IT 基础 设施 与 数据 中 心 
o 了 解 存储 的 应 用 环境 
o 了 解 机 械 硬 盘 以 及 SSD 硬 盘 结 构 及 实现 原理 
o 了解 主 机 应 用 环境 
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.IT 基础 设施 与 数据 中 心 介 绍 


存储 的 应 用 环境 介绍 
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企业 [系统 离 不 开 计算 机 /服务 器 ， 因 此 ， 在 介绍 IT 基础 设施 之 前 ， 我 们 先 回 顾 一 下 计 
算 机 系统 的 构成 。 


计算 机 系统 的 构成 可 以 划分 为 四 个 层面 % 即 : 计算 资源 、 内 部 总 线 、 存 储 资源 和 软件 
资源 。 计 算 资源 主要 由 计算 的 核心 硬件 CPU 来 实现 。 大 家 知道 ，CPU 运 算 速 度 越 快 ， 计 算 
机 的 计算 能 力也 越 强 。 数 据 临时 存储 由 内 存 来 完成 ， 而 长 久 存储 则 由 内 置 硬 盘 、 光 盘 、 软 
盘 等 来 实现 。 计 算 机 内 部 的 数据 通讯 则 由 其 内 部 总 线 (BUS) 来 完成 ， 包 括 数据 的 输入 、 
输出 等 。 一 个 完整 的 计算 系统 包括 硬件 与 之 相 匹配 的 软件 。 在 系统 软件 的 基础 上 ， 为 实现 
特定 的 业务 功能 应 用 ， 针 对 应 用 软件 的 开发 也 必 不 可 少 。 


由 上 可 以 看 出 ， 在 独立 的 计算 系统 中 ， 数 据 计 算 、 存 储 通常 依靠 CPU 和 内 置 的 的 存储 
设备 来 实现 ， 在 计算 要 求 越 来 越 快 、 计 算 规模 越 来 越 大 、 需 存储 数据 量 也 越 来 越 大 时 很 容 
易 出 现 瓶 颈 。 
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IT 系统 构 成 


软件 资源 集群 系统 、 分 布 式 计算 、 应 用 系统 、 


计算 资源 


网 络 资源 Ethernet ~ w FC Switch 


外 部 存储 





W Huawei 


随 着 大 型 计算 、 海 量 数据 存储 的 发 展 。 对 计算 能 力 、 数 据 存储 资源 方面 都 有 更 高 的 要 
求 ， 独 立 的 计算 机 系统 已 经 很 难 满足 。 因 此 ， 和 就 需要 把 多 个 计算 机 系统 集成 起 来 ， 构 成 了 
一 个 整体 的 IT 系统 。IT 系 统 是 在 计算 机 系统 的 基础 上 所 进行 的 扩展 和 延伸 ， 其 染 构 上 仍然 可 
以 划分 为 计算 资源 、 网 络 资源 、 存 储 资源 和 软件 资源 四 个 层面 。 

计算 资源 : 在 IT 系统 中 ， 往 往 会 把 多 全 服务 器 组 成 集群 ， 通 过 集群 方式 实现 计算 资源 
的 负载 均衡 ， 提 升 整体 计算 能 加 同时， 提高 系统 的 见 余 ， 保 证 系统 的 可 靠 性 。 


存储 资源 : 在 !T 系 统 中 六 存储 资源 从 内 置 存 储 向 外 扩展 成 为 外 部 存储 ， 通 过 构建 专用 
的 外 部 存储 系统 ， 数 据 存储 得 到 很 大 扩展 ， 为 大 数据 量 存储 提供 了 必 备 条 件 ， 同 时 ， 保 证 
了 数据 安全 可 靠 。 

网 络 资源 : 从 独立 的 计算 机 系统 发 展 成 为 [系统 ， 必 然 需要 强大 网 络 资源 提供 数据 通 
路 ， 计 算 机 系统 内 部 总 线 已 经 不 能 满足 [系统 网 络 资源 的 要 求 ， 因 此 基于 TCP/IP 网 络 和 基 
于 FC 协议 的 FC 网 络 染 构 得 到 长 足 的 发 展 ,已 经 成 为 |T 系 统 网 络 资 源 的 主流 。 


软件 资源 : 在 !T 系 统 染 构 中 ， 软 件 资源 不 仅仅 是 独立 计算 系统 中 的 单一 操作 系统 ， 而 
是 发 展 成 为 集群 软件 系统 、 分 布 式 文件 系统 等 ， 通 过 这 些 方式 实现 集群 业务 管理 和 分 布 式 
应 用 。 
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在 IT 基础 设施 中 ， 软 件 也 是 必 不 可 少 的 一 部 分 。 软 件 可 以 从 下 到 上 分 为 : 硬件 底层 驱 
动 、 操 作 系统 、 数 据 库 、 应 用 软件 。 


硬件 底层 驱动 和 应 用 软件 之 间 需 要 实现 相应 的 信息 交互 。 一 方面 ， 应 用 程序 通过 对 驱 
动 程序 发 送 指令 ， 实 现 硬件 控制 的 动作 指令 ， 另 一 方面 ， 驱 动 程序 将 从 硬件 上 获得 的 数据 
传送 给 应 用 程序 ， 实 现 应 用 程序 与 驱动 程序 间 的 交互 。 也 就 是 说 ， 硬 件 底层 驱动 实现 了 访 
问 底层 硬件 的 人 机 交互 。 例 如 : 竺 板 必 片 驱动 、 网 卡 驱动 等 。 


操作 系统 是 管理 计算 机 硬件 与 软件 资源 的 计算 机 程序 ， 提 供 一 个 让 用 户 与 系统 交互 的 
操作 界面 。 操 作 系 统 需要 处 理 如 管理 与 配置 内 存 、 决 定 系统 资源 供需 的 优先 次 序 、 控 制 输 
入 与 输出 MO 设备 、 操 作 网 络 与 管理 文件 系统 等 基本 事务 。 例 如 : 微软 Windows 操 作 系统 
、Linux 操 作 系 统 、Unix 操 作 系 统 、AIX 系 统 等 。 


数据 库 (Database) 是 按照 数据 结构 来 组 织 、 存 储 和 管理 数据 的 仓库 。 随 着 信息 技 
术 和 市 场 的 发 展 ， 数 据 库 有 发 展 出 很 多 种 类 型 ， 从 最 简单 的 数据 表格 到 能 够 进行 海量 数据 
存储 的 大 型 数据 库 系 统 都 在 各 个 方面 得 到 了 广泛 的 应 用 。 例 如 : Oracle、DB2 等 。 

应 用 软件 是 为 满足 用 户 不 同 领域 、 不 同业 务 应 用 需求 而 提供 的 上 层 软 件 。 它 可 以 拓宽 
计算 机 系统 的 应 用 领域 ， 放 大 硬件 的 功能 。 例 如 : E-mail 应 用 、 财 务 系统 等 。 
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IT 系统 基础 设施 一 一 计算 资源 


i | 


机 架 服 务 器 Ç 
塔 式 服务 器 刀片 服务 器 


服务 器 集群 
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T 系 统 中 的 计算 资源 ， 通 常 由 各 式 各 样 的 服务 器 构成 。 当 单个 的 服务 器 计算 能 力 不 能 
够 满足 应 用 需求 的 时 候 ， 采 用 服务 器 集群 的 形式 提供 计算 能 
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IT 系统 基础 设施 一 一 网 络 
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在 IT 系统 基础 设施 网 络 架构 中 主要 划分 成 4 个 层次 ， 从 下 到 上 依次 为 : 存储 层 、 服 务 器 
层 、 核 心 层 、 外 部 接 入 层 。 

存储 层 通过 TCP/IP 或 FC 网 络 连 接 到 服务 器 层 ， 为 服务 器 提供 数据 存储 空间 资源 ， 服 务 
器 层 接 入 核心 层 ， 内 部 和 外 部 用 户 通过 接 入 层 、 汇 聚 层 连接 核心 层 ， 在 核心 层 实现 快速 数 
据 交换 。 为 实现 远程 容 灾 ， 企 业 需 要 建立 异地 灾 备 中 心 ， 通 过 专用 网 络 实现 存储 层 与 灾 备 
中 心 的 互联 。 
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IT 系统 基础 设施 一 一 存储 资源 


硬盘 


物理 带 库 磁盘 阵列 虚拟 磁带 库 





Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. w HUAWEI 


存储 资源 根据 存储 的 位 置 可 分 为 内 部 存储 和 外 部 存储 ， 在 存储 NA 后 面 的 课程 中 ， 重 点 
介绍 外 部 存储 ， 如 SAN 存 储 和 NAS 设 备 。 
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IT 系统 面临 的 问题 


系统 可 靠 性 难以 保障 


资源 利用 率 低 A 
VEUX 
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资源 利用 率 低 : 服务 器 资源 ， 网 络 资源 、 存 储 资源 难以 得 到 有 效 的 利用 ; 
系统 可 靠 性 难以 保障 : 设备 的 可 靠 性 ， 传 输 链 路 的 可 靠 性 难以 保障 ; 


统一 管理 难 : 每 一 个 设备 是 单独 的 一 套 告警 系统 ， 要 了 解 整个 系统 的 情况 ， 需 要 到 每 一 
台 设 备 上 去 查看 ， 每 一 套 设备 有 单独 的 密码 ， 管 理 人 员 要 分 别 去 记 ， 设 置 复 杂 了 难于 记 
忆 ， 设 置 简单 了 存在 着 一 定 的 安全 隐患 。 


基于 上 述 原因 ， 出 现 了 数据 中 心 ， 使 以 上 的 问题 得 到 了 很 好 的 解决 。 





数据 中 心 的 定义 


。 数据 中 心 (DataCenter) 通 常 是 指 在 一 个 物理 空间 内 实现 信息 的 集中 处 理 、 
存储 、 传输 、 交换 、 管理 。 
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计算 机 设备 、 服 务 器 设备 、 网 络 设备 、 存储 设备 等 通常 认为 是 数据 中 心 的 关键 设备 。 
关键 设备 运行 所 需要 的 环境 因素 ， 如 供电 系统 制冷 系统 、 机 柜 系 统 、 消 防 系统 、 监 控 系 
统 等 通常 被 认为 是 关键 物理 基础 设施 。 
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数据 中 心 的 结构 


基础 软件 
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广义 的 数据 中 心 是 企业 (M) 的 业务 系统 与 数据 资源 进行 集中 、 集 成 、 共 享 、 分 析 


的 场地 、 工 具 、 流 程 的 有 机 组 合 。 其 核心 内 容 包括 业务 系统 、 数 据 ETL、@ 〇 DS 数 据 库 、 数 
据 仓 库 、 数 据 集 市 、 商 务 智能 等 ， 也 包括 物理 的 运行 环境 〈 中 心机 房 ) 和 运行 维护 管理 服 


l. 


22 [ 


。 具 体 来 说 它 包 含 以 下 四 个 方面 的 具体 含义 : 


数据 中 心 提供 所 有 的 应 用 系统 (包括 集中 的 业务 应 用 系统 、 数 据 交换 平台 、 应 用 集成 
平台 ) 的 运营 环境 ; 

数据 中 心 是 容纳 用 以 支持 应 用 系统 运行 的 基础 设施 (包括 机 房 、 服 务 器 、 网 络 、 存 储 
设备 ) 的 物理 场所 ; 

数据 中 心包 括 数据 中 心 本 身 的 ODS、 数 据 仓库 及 建立 在 其 上 的 决策 分 析 应 用 ; 

数据 中 心 有 一 套 成 熟 的 运行 、 维 护 体系 支持 其 日 常 运行 ， 保 证 应 用 系统 高 效 、 准 确 、 
不 间断 地 运行 。 

根据 数据 中 心 的 定义 和 发 展 趋势 ， 可 以 将 数据 中 心 划 分 为 4 个 层次 : 

基础 设施 层 :、 用 统一 的 技术 将 机 房 、 通 信 、 计 算 、 存 储 等 IT 基础 资源 融合 形成 数据 中 
心 的 基础 设施 ， 为 业务 系统 提供 基本 的 资源 服务 ， 提 高 资源 利用 率 以 及 IT 系统 的 可 靠 
性 。 

基础 软件 层 : 信息 资源 是 企业 生产 过 程 中 所 涉及 的 一 切 文件 、 资 料 、 图 表 和 数据 等 信 
已 的 总 称 。 本 层 存 储 了 企业 MA) 生产 和 经 营 活动 所 产生 、 获 取 、 处 理 、 存 储 、 传 
输 和 使 用 的 一 切 信息 资源 。 

管理 调度 : 实现 存储 资源 化 、 计 算 资 源 化 、 网 络 资 源 化 ， 并 能 够 动态 调整 资源 匹配 数 
据 的 读 写 存储 ， 解 决 统一 管理 难 的 问题 ; 

应 用 层 : 主要 包括 针对 结构 化 和 非 结构 化 数据 的 各 种 应 用 。 包 括 种 业务 系统 、 辅 助 决 
策 系 统 和 各 种 多 媒体 应 用 (监控 、 流 媒体 、 统 一 通信 、 呼 叫 中 心 、 视 频 会 义 、 
VOIP) 。 





存储 在 数据 中 心 的 功能 


= | 3] fk à y 
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。 集中 存储 
分 散 的 存储 不 便于 集中 管理 ， 存 储 资源 也 不 利于 共享 ， 造 成 资源 的 浪费 。 
。 海量 空间 
随 着 Internet 的 发 展 ， 海 量 的 非 结构 化 的 数据 的 诞生 ， 对 数据 中 心 的 存储 也 提出 了 新 
的 要 求 ， 在 一 定 程度 上 ， 海 量 存储 空间 的 大 小 直接 决定 着 数据 中 心 的 发 展 规模 。 
。 快速 MO 


由 于 数据 中 心 的 用 户 众 多 ，MO 的 快速 响应 能 力 直接 决定 着 用 户 的 应 用 感知 ， 因 此 ， 
快速 的 MO 也 为 数据 中 心 的 高 效 运行 提供 了 保障 。 
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主机 的 内 部 应 用 环境 


。 主机 内 部 VO 流 程 各 个 环节 共同 构成 了 数据 存储 的 内 部 应 用 环境 。 


VOK | 
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主机 服务 器 大 部 分 MO 开始 于 需要 访问 数据 的 应 用 ， 应 用 通常 不 考虑 存储 后 端的 操作 
细节 ， 而 是 直接 调用 由 操作 系统 提供 的 系统 调用 接口 ， 然 后 由 操作 系统 支持 的 文件 系统 为 
数据 提供 数据 的 逻辑 地 址 和 在 磁盘 上 存储 的 物理 地 址 的 映射 ， 再 通过 设备 驱动 层 ， 主 要 是 
SC3SI 协 议 的 操作 ， 将 数据 存储 到 存储 设备 (比如 主机 服务 器 内 部 硬盘 ) 上 。 因 此 主机 服务 
器 内 部 数据 存储 MD 济 程 中 的 各 个 环节 对 数据 存储 的 可 靠 性 、 性 能 和 安全 性 都 起 到 非常 重 
要 作用 ， 从 独立 的 主机 服务 器 来 看 ,其 内 部 |/O 〇 流程 各 个 环节 即 共同 构成 了 存储 的 内 部 应 
用 环境 。 
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传统 内 置 存 储 遇 到 的 问题 


。 硬盘 成 为 整个 系统 的 性 能 瓶颈 
o 有 限 的 硬盘 槽 位 ， 难 满足 大 容量 需求 


o 单个 硬盘 存放 数据 ， 数 据 可 靠 性 难以 
保证 


存储 空间 利用 率 低 

o 本 地 存储 ， 数 据 分 散 ， 难 以 共享 
可 扩展 性 不 够 

o 总 线 结构 ， 而 非 网 络 结构 


。 可 连接 的 设备 受到 限制 增加 容量 时 ， 
需 停 机 
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在 传统 的 计算 机 存储 系统 中 ， 存 储 工 作 通 常 是 由 计算 机 内 置 的 硬盘 来 完成 ， 而 采用 这 
样 的 设计 方式 ， 硬 盘 本 身 的 缺陷 很 容易 成 为 整个 系统 的 性 能 瓶颈 ， 并 且 ， 由 于 机 箱 内 有 限 
的 空间 ， 限 制 了 硬盘 数量 的 扩展 ， 并 县 同时 也 对 机 箱 内 的 散热 、 供 电 等 提出 了 严峻 的 挑战 
。 再 加 上 不 同 的 计算 机 各 自 为 战 ， 使 用 各 上 自 内 置 的 硬盘 ， 导 致 从 总 体 看 来 存储 空间 的 利用 
率 较 低 ， 并 且 分 散 保存 的 数据 也 不 利于 数据 的 共享 和 备份 工作 。 在 传统 的 CA 架构 中 ， 无 
论 使 用 的 是 何 种 协议 ， 存 储 设备 都 直接 与 服务 器 相连 接 。 在 这 样 的 结构 下 ， 对 存储 设备 上 
所 保存 的 所 有 数据 的 任何 读 写 操作 4 都 必须 由 服务 器 来 进行 ， 这 样 的 处 理 方式 给 服务 器 带 
来 了 沉重 的 负担 。 


外 部 存储 系统 的 出 现 ， 彻 底 将 服务 器 从 繁琐 的 MO 操作 中 解放 出 来 ， 使 服务 器 更 加 专 
门 化 ， 使 之 仅仅 承担 应 用 数据 的 操作 任务 ， 以 更 充分 的 释放 自身 潜能 。 
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网 络 存储 应 用 环境 


。 网 络 存储 系统 各 层 构成 了 网 络 存储 系统 的 应 用 环境 ， 决 定 了 数据 存储 的 可 
靠 性 、 性 能 和 安全 性 。 
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存储 设备 
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网 络 存储 系统 按照 不 同 的 功能 ， 可 划分 为 三 层 : 


第 一 层 : 主机 层 ， 运 行 相 关 应 用 ， 发 起 存储 IO 〇 操作。 在 主机 侧 需要 存储 连接 的 设备 主 
要 有 FC HBA 卡 ，iSC3SI HBA 卡 ， 以 太 网 卡 ， 需 在 主机 侧 安 装 的 存储 连接 软件 包括 : 
initigtor 启 动 器 ,Open-iscsi, 多 路 径 软 件 等 。 

第 二 层 : 网 络 层 ， 将 主机 与 存储 层 互联 ， 提 供 网 络 通路 ， 可 采用 FC 网 络 或 者 以 太 网 络 
的 方式 ; 以 太 网 络 可 利用 原 有 以 太 网 络 连接 ， 利 用 现 有 资源 组 网 。FC 网 络 需要 建立 专门 的 
网 络 ， 速 度 快 ， 但 是 FC 器 件 都 较 昂贵 ， 成 本 高 。 

第 三 层 : 存储 层 , ,存储 系统 的 核心 层 ， 对 数据 进行 存储 、 管 理 。 

上 面 提 到 的 每 一 层 都 将 对 数据 存储 的 可 靠 性 、 性 能 、 安 全 性 产生 重要 影响 ， 因 此 在 进 
行 存储 系统 建设 时 需要 从 以 上 各 层 使 用 的 硬件 设备 、 软 件 协议 、 组 网 架构 等 方面 考虑 ， 
以 保证 业务 应 用 对 数据 存储 可 靠 性 、 性 能 、 安 全 性 方面 的 需求 。 

下 面 我 们 将 从 存储 介质 和 主机 应 用 维度 对 存储 应 用 环境 影响 因素 进行 介绍 ， 涉 及 到 存 
储 网 络 及 存储 设备 部 分 的 内 容 将 在 后 面 的 章节 中 重点 介绍 。 
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机 械 硬 盘 的 结构 
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机 械 硬 盘 包 含 机 械 装置 和 电子 装置 ， 可 以 分 为 如 下 部 分 : 
磁头 组 件 
用 于 数据 的 读 取 和 写 入 。 
磁头 驱动 机 构 
用 于 驱动 磁头 臂 将 磁头 送 达 指定 的 位 置 。 
盘 片 组 
数据 的 载体 。 
主轴 驱动 装置 
驱动 盘 片 维持 高 速 运转 。 
控制 电路 
系统 控制 、` 调 速 、 驱 动 等 。 
接口 
用 于 硬盘 与 主板 连接 ， 常 见 的 接口 类 型 有 ATA,SATA,SAS。 


W Huawei 
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机 械 硬 盘 的 磁头 技术 

















被 磁化 的 粒子 
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。 机 械 部 分 


30 [ 


1. 系统 在 密封 机 构 里 

2. 盘 片 固定 并 由 主轴 驱动 进行 高 速 旋转 
3. 磁头 沿 盘 片 径 向 移动 

4. 磁头 在 盘 片 上 方 飞行 

电子 部 分 

1. 盘 片上 溅 镀金 属性 粒子 ， 呈 不 规则 排列 
2. 通过 控制 线圈 上 的 电流 ， 磁 头 形成 磁场 
3. 对 盘面 上 的 金属 粒子 进行 磁化 (整齐 排列 ) 
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盘 片 的 功能 分 布 


磁头 在 不 同位 置 
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磁头 靠近 主轴 接触 的 表面 ， 即 线 速度 最 小 的 地 方 ， 是 一 个 特殊 的 区 域 ， 它 不 存放 任何 
数据 ， 称 为 启 停 区 或 着 陆 区 (Landing Zone)，， 启 停 区 外 就 是 数据 区 。 在 最 外 圈 ， 离 主 
轴 最 远 的 地 方 是 “0” 磁 道 ， 硬 盘 数据 的 存放 就 是 从 最 外 圈 开 始 的 。 那 么 ， 磁 头 是 如 何 找 
到 “0” 磁 道 的 位 置 的 呢 ? 在 硬盘 中 还 有 所 个 叫 “0” 磁 道 检测 器 的 构件 ， 它 是 用 来 完成 硬 
盘 的 初始 定位 。 
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盘 片 的 逻辑 结构 


磁道 Track 

柱 面 Cylinder 

扇 区 Sector 

磁头 数 Head number 
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。 磁道 Track 


磁盘 上 人 为 规定 的 若干 个 同心 圆 的 轨道 称 为 磁道 ; 磁道 从 外 向 内 由 0 开始 编号 。 
300~1024， 甚 至 更 多 。 


。 柱 面 Cylinder 

所 有 盘面 上 的 同一 磁道 构成 一 个 圆 往 ， 称 为 柱 面 ; 柱 面 从 外 向 内 由 0 开始 编号 ， 和 磁道 
数目 一 致 ; 
e KX Sector 


磁盘 上 每 个 磁道 被 分 为 若干 个 弧 段 ， 由 1 开始 编号 ; FARA AE S 2R 
信息 ， 称 为 扇 区 。 


。 人 磁头 数 Head number 
磁盘 上 每 个 盘面 都 有 对 应 的 读 写 磁头 ; 磁头 数 与 盘面 数 一 致 。 
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硬盘 主要 参数 


。 硬盘 容量 (Volume) 
。 转速 (Rotational speed) 
。 缓存 (Cache) 


N° 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. ~ Page 23 w HUAWEI 





。 硬盘 容量 (Volume) 
容量 的 单位 为 兆 字 节 (MB) 或 千 兆 字 节 (GB) 。 影 响 硬盘 容量 的 因素 有 单 碟 容量 和 
碟 片 数量 。 
转速 (Rotational speed) 
硬盘 的 转速 是 指 硬盘 盘 片 每 分 钟 转 过 的 圈 数 ， 单 位 为 RPM (Rotation Per Minute) 


一 般 硬盘 的 转速 都 达到 5400RPNV7200RPM。 有 些 SCSI 接 口 的 硬盘 使 用 了 液态 轴承 技术 
转速 可 达 10000 - 15000RPRA 


缓存 (Cache) 


由 于 CPU 与 硬盘 之 间 存 在 巨大 的 速度 差异 ， 为 解决 硬盘 在 读 写 数据 时 CPU 的 等 待 问题 
， 在 硬盘 上 设置 适当 的 高 速 缓存 ， 以 解决 二 者 之 间 速 度 不 匹配 的 问题 。 硬 盘 缓存 与 CPU 上 
的 高 速 缓 存 作 用 一 样 是 为 了 提高 硬盘 的 读 写 速度 。 


o 
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平均 访问 时 间 


。 平均 访问 时 间 由 以 下 两 项 构成 : 
o 平均 寻 道 时 间 (Average Seek Time) 
o 平均 等 待 时 间 (Average Latency Time) 


”等待 时 间 


Data Block 
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。 平均 寻 道 时 间 (Average Seek Time) 


硬盘 的 平均 寻 道 时 间 是 指 硬盘 的 磁头 从 初始 位 置 移 动 到 盘面 指定 磁道 所 需 的 时 间 ， 是 
影响 硬盘 内 部 数据 传输 率 的 重要 参数 。 这 个 时 间 越 小 越 好 。 有 目前 IDE 和 硬盘 的 平均 寻 道 时 间 
通常 在 8ms 到 11ms 之 间 。 

e 硬盘 的 等 待 时 间 (Average Latency Time) 

硬盘 的 等 待 时 间 又 叫 潜伏 期 ， 是 指 磁 头 已 处 于 要 访问 的 磁道 ， 等 待 所 要 访问 的 扇 区 旋 
转 至 磁头 下 方 的 时 间 。 平 均等 待 时 间 通 常 为 盘 片 旋转 一 周 所 需 时 间 的 一 半 ， 因 此 硬盘 转速 
越 快 ， 等 待 时 间 就 越 短 ， 一 般 应 在 4ms 以 下 。 

。 平均 访问 时 间 (Average Access Time) 
平均 访问 时 间 三 平均 寻 道 时 间 + 平均 等 待 时 间 。 


AT 


数据 传输 率 


。 数据 传输 率 (Data Transfer Rate) 
。 AREH (Internal Transfer Rate) 
。 外 部 传输 率 {External Transfer Rate) 


Internal 
External 
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。 数据 传输 率 (Data Transfer Rate) 

硬盘 的 数据 传输 率 是 指 硬盘 读 写 数 据 的 速度 ， 单 位 为 兆 字 节 每 秒 (MB/s) 。 硬 盘 数据 
传输 率 包 括 内 部 传输 率 和 外 部 传输 率 两 个 指标 。 
。 内 部 传输 率 (Internal Transfer Rate) 

内 部 传输 率 也 称 为 持续 传输 率 (Sustained Transfer Rate) ， 是 缓存 之 间 的 数据 传输 
速度 ， 它 反映 了 硬盘 缓冲 区 没有 使 用 时 的 性 能 ， 这 可 以 说 是 影响 硬盘 整体 速度 的 瓶颈 。 内 
部 传输 率 主要 依赖 于 硬盘 的 磁头 到 硬盘 的 高 速 旋 转速 度 。 值 得 注意 的 是 Mb/3S 或 Mbps 为 单 
位 ， 这 是 兆 位 / 秒 
。 外 部 传输 率 (External Transfer Rate) 

外 部 传输 率 也 称 为 突 发 数据 传输 率 (Burst Data Transfer Rate) 或 接口 传输 率 。 它 指 
的 是 系统 总 线 与 硬盘 缓冲 区 之 间 的 数据 传输 率 ， 与 硬盘 接口 类 型 和 硬盘 缓存 的 大 小 有 关 。 
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[OPSFAThroughput 


。 IOPS 
o IOPS (Input/Output Per Second) 即 每 秒 的 输入 输出 量 ( 或 读 写 次 数 )， 是 衡量 磁 
盘 性 能 的 主要 指标 之 一 。 
e Throughput < 
o ThroughpPuit 知 吐 量 , 指 单位 时 间 内 可 以 成 功 传输 的 数据 数量 。 对 于 大 量 顺 序 恋 写 
的 应 用 ， 如 电视 台 的 视频 编辑 ， 视 频 点 播 YOD(Video On Demand}, MEX 
注 吞 吐 量 指标 。 
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。 IOPS 计 算 方法 


磁盘 完成 一 个 MO 请求 所 花费 的 时 间 闪 它 由 寻 道 时 间 、 旋 转 延 迟 和 数据 传输 时 间 三 部 
分 构成 。 


寻 道 时 间 Tseek 是 指 将 读 写 磁 头 移动 至 正确 的 磁道 上 所 需要 的 时 间 。 寻 道 时 间 越 短 ， 
IO 操作 越 快 ， 目 前 磁盘 的 平均 寻 道 了 时间 一 般 在 3- 15ms。 


旋转 延迟 Trotation 是 指 盘 片 旋转 将 请 求 数据 所 在 扇 区 移 至 读 写 磁头 下 方 所 需要 的 时 间 
。 旋 转 延 迟 取决 于 磁盘 转速 全 通常 使 用 磁盘 旋转 一 周 所 需 时 间 的 1/2 表 示 。 比 如 ，7200 
rpm 的 磁盘 平均 旋转 延迟 大 约 为 60*1000/7200/2 = 4.17ms， 而 转速 为 15000 rpm 的 磁盘 
其 平均 旋转 延迟 约 为 2ms; 

数据 传输 时 间 Tiransfer 是 指 完成 传输 所 请 求 的 数据 所 需要 的 时 间 ， 它 取决 于 数据 传输 
率 ， 其 值 等 于 数据 大 小 除 以 数据 传输 率 。 目 前 IDE/ATA 能 达到 133MB/s，SATA 1 可 达到 
300MB/s 的 接口 数据 传输 率 ， 数 据 传输 时 间 通 常 远 小 于 前 两 部 分 时 间 。 因 此， 理论 上 可 以 
计算 出 磁盘 的 最 大 IOPS， 即 IDPS = 1000 ms/ (Tseek + Troatation)， 忽 略 数 据 传 输 时 间 。 
假设 磁盘 平均 物理 寻 道 时 间 为 3ms, 磁盘 转速 为 7200,10K,15K rpm， 则 磁盘 IOPS 理 论 最 大 
值 分 别 为 ， 

TOPS = 1000 / (3 + 60000/7200/2) = 140 

IOPS = 1000 / (3 + 60000/10000/2) = 167 


IOPS = 1000 / (3 + 60000/1 5000/2) = 200 
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硬盘 常用 接口 一 一 ATA 接 口 


。ATA( Advanced Technology Attachment ) 高 级 技术 附加 装置 
o ATA 和 硬盘 也 经 常 称 为 IDE Integrated Drive Electronics 硬盘 
o ATA 接 口 为 并 行 ATA 技 术 
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ATA 接 口 发 展 到 今 ， 细 分 可 以 分 成 AIA-1 (IDE) 、ATA-2 (EIDE Enhanced IDE/Fast 
ATA) 、AIA-3 (FastATA-2) « Ultra ATA, Ultra ATA/33、 Ultra ATA/66\ Ultra 
ATA/100XSerial ATA。ATA 发 展 到 AT 从 100 已 经 到 了 尽头 ， 转 向 SATA。 


。 ATA 接 口 具 有 以 下 优 缺 点 : 


o 优点 : 价格 低廉 、 兼 容 性 非常 好 ; 
o 缺点 : 速度 慢 、 只 能 内 置 使 用 、 对 接口 电缆 的 长 度 有 很 严格 的 限制 
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硬盘 常用 接口 一 一 SCS| 接 口 


。 SCSI (Small Computer System Interface ) 小 型 计算 机 系统 接口 。 
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SCS5l 硬 盘 并 发 处 理性 能 优异 ， 常 应 用 玉 企 业 级 存储 领域 。3C5I 硬 盘 分 50、68、80 针 ， 
由 SCSI-1 不 断 发 展 至 当前 主流 Ultra 320 (320MB/s) 。 


。 优点 : 
o 适应 面 广 ， 在 一 块 SC3SI 控 制 卡 上 就 可 以 同时 挂 接 15 个 设备 ; 
o 高 性 能 (具有 多 任务 w 宽带 宽 及 CPU 占用 率 低 等 特点 ) ; 
o 具有 外 置 和 内 置 两 种 ，,. 支 持 热 插 拔 。 


38 0 


硬盘 常用 接口 一 一 SATA 接 口 


e SATA: Serial ATA (Serial ATA) ÆfTATA 


o SATA 采 用 串 行 方式 进行 数据 传输 ， 接 口 速率 比 IDE 接 口 高 ， 最 低 为 
150MBps， 并 且 第 二 代 (SATAJ ) 300MBps 接 口 硬 盘 已 经 形成 商用 
规划 内 的 最 高 速率 可 达 600MBps 以 

o SATA 和 硬盘 采用 点 对 点 连接 方式 ， 支 持 热 插 拔 ， 即 插 即 用 
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SATA 接 通常 为 7+15 针 ， 采 用 单 通道 ,。 传 输 速 案 要 比 ATA 更 快 。3ATA 具 有 比 ATA 更 好 
的 抗 干扰 能 力 。 
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硬盘 SAS 接 口 


e SAS(Serial Attached SCSI) 串 行 连接 SCSI 
SA5 是 一 种 点 对 点 、 全 双 工 、 双 端口 的 接口 
SAS 专 为 满足 高 性 能 企业 需求 而 设计 ， 实 现 与 DATA 的 互 操作 ， 为 企业 用 户 带 来 前 
所 未 有 的 灵活 性 和 低 成 本 
速率 每 路 600M 
SAS 具 有 高 性 能 、 高 可 靠 性 、 强 大 的 扩展 性 能 
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SASH AA TR ASATA, MARKARIAN 在 传输 速率 、 抗 干扰 性 方面 强 于 YC3|， 
SAS 接 口 硬盘 价格 相对 更 高 。 
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硬盘 常用 接口 一 一 FC 接口 


。 FC 硬盘 采用 FC-AL( Fiber Channel Arbitrated Loop) 光纤 通道 仲裁 环 
o FC-AL 是 一 种 双 端 口 的 串 行 存储 接口 
o FC-ALl 支 持 全 双 工 工作 方式 


o _FC-AL 利 用 类 似 SATA/SAS 所 用 的 4 芯 连 接 ， 提 供 一 种 单 环 拓扑 结构 ， 一 个 控制 中 能 
访问 126 个 硬盘 


40-pin Male FC-SCA 
ll Connector 
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FC 硬盘 定位 于 高 端 存 储 应 用 ， 可 靠 性 和 性 能 高 ，FC 硬 盘 一 般 都 同时 提供 两 个 FC 接口 
， 可 同时 使 用 或 互 为 备份 。 


优点 : 
o 具有 很 好 的 升级 性 ， 可 以 用 非常 长 的 光纤 电缆 ， 可 超过 10 公 里 ; 
o 具有 非常 高 的 带宽 ; 
o 具有 很 强 的 通用 性 %。 

缺点 : 
o 价格 非常 
0 组 件 复杂 。 


A H . 
ER ZX ， 
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硬盘 常用 接口 一 一 NL SAS 


。 NL SAS 采用 SAS 接 口 、SATA 盘 体 ， 也 叫 近 线 SAS。 


wn [en [oe wer O 
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NL SAS 是 指 采 用 了 3AS 接 口 和 3ATA 盘 体 的 综合 体 。 即 具有 As 接口 、 接 近 3As 性 能 的 
SATA 盘 。NL 是 Near Line 的 缩写 ， 意 为 近 线 。sS 所 谓 的 近 线 存储 ， 主 要 定位 于 客户 在 线 存 储 
和 离线 存储 之 间 的 应 用 。 就 是 指 将 那些 并 不 是 经 常用 到 ， 或 者 说 数据 的 访问 量 并 不 大 的 数 
据 存放 在 性 能 较 低 的 存储 设备 上 。 但 同 内 对 这 些 的 设备 要 求 是 寻 址 迅速 、 传 输 率 高 。 ( 例 
如 客户 一 些 长 期 保存 的 不 常用 的 文件 的 归档 ) 。 因 此 ， 近 线 存储 对 性 能 要 求 相 对 来 说 并 不 
高 ， 但 又 要 求 相对 较 好 的 访问 性 能 。 踢 时 多 数 情况 下 由 于 不 常用 的 数据 要 占 总 数据 量 的 比 
较 大 的 比重 ， 这 也 就 要 求 近 线 存储 设备 需要 容量 相对 较 大 。 


在 线 存储 (OnStore) 是 工作 级 的 存储 ， 在 线 存储 的 最 大 特征 是 存储 设备 和 所 存储 的 数 
据 时 刻 保持 “在 线 ” 状 态 ， 可 以 随时 读 取 和 修改 ， 以 满足 前 端 应 用 服务 器 或 数据 库 对 数据 
访问 的 速度 要 求 。 

离线 存储 (OffStere) 主 要 使 用 光盘 或 磁带 存储 。 大 多 数 情况 下 主要 用 于 对 在 线 存储 的 
数据 进行 备份 ， 以 防范 可 能 发 生 的 数据 灾难 ， 因 此 又 称 备份 级 的 存储 。 
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SAS、NL-SAS 与 SATA 的 应 用 比较 


原生 支持 SCSI 

í 支持 双 端 访问 

原生 支持 SCSI 高 级 容错 技术 
支持 双 端 访问 大 容量 
高 级 容错 技术 低 功 耗 


访问 频率 较 高 更 适合 大 数据 块 适合 大 数据 块 
以 小 数据 块 居多 | 业务 压力 不 大 的 用 | 亚 务 压力 不 大 的 
数据 较为 离散 的 高 / 户 使 用 用 户 使 用 


~ 
àW 
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支持 双 端 访问 : 双 端 访问 的 目的 主要 不 是 为 也 提高 硬盘 的 访问 带宽 ， 而 是 为 了 硬盘 的 
高 可 用 性 和 容 灾 的 需要 而 采取 的 一 种 技术 ， 在 存储 系统 中 ， 硬 盘 的 双 端 口 分 别 接 到 存储 的 
A 控 ，B 控 ， 当 某 一 个 控制 器 上 的 端口 出 现 故障 的 时 候 ， 可 通过 另 一 个 端口 访问 。 
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SSD 简 介 


SSD 硬 件 结构 原理 


55D 架 构 框 图 
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无 高 速 旋转 部 件 ， 性 能 高 ” 功 耗 低 

多 通道 并 发 ， 通 道内 Elesh 颗 粒 复 用 时 序 
支持 TCQ/NCQw 志 次 响应 多 个 IO 请 求 
典型 响应 时 间 低 于 0.Tms 
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NCQ (Native Command Queuing) 5TEQ (Tagged Command Queuing) 
都 是 设计 通过 把 计算 机 发 向 硬盘 的 指令 做 重新 排序 ， 从 而 提高 硬盘 性 能 的 技术 。NCQ 技 
术 在 300MB/s 的 Serial ATA 1 规格 中 引入 入 针对 的 是 主流 的 硬盘 产品 ， 而 TCQ 技 术 是 在 
SC3I2 规 格 中 引入 (ATA-4 标 准 中 也 有 采用 ) ， 针 对 的 是 服务 器 以 及 企业 级 硬盘 产品 。 


要 使 用 NCQ、TCQ 技 术 ， 芯 入 组 硬盘 接口 和 硬盘 产品 本 身 都 必须 支持 才 行 ， 也 就 是 
说 ， 如 果 你 购买 的 一 款 新 硬盘 并 不 支持 NCQ， 即 使 你 的 主板 是 最 新 的 支持 NCQ 的 ， 也 不 
能 够 打开 这 个 功能 从 而 提高 性 能 。 
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SSD 性 能 优势 


。 响应 时 间 短 SSD 技 术 性 能 优势 
o 机 械 硬盘 的 机 械 特 性 导致 大 部 分 时 
间 浪 费 在 寻 道 和 机 械 延 迟 上 ， 数 据 
传输 效率 受到 严重 制约 。 
a 机械 硬盘 在 进行 随机 读 写 操作 时 ， 
磁头 不 停 地 移动 ， 导 致 读 写 效率 低 TAMA 
下 ， 而 SSD 通 过 内 部 控制 器 计算 出 
数据 的 存放 位 置 ， 直 接 进行 存 取 操 


作 ， 故 效率 高。 I 前 
py Y 
h È 
Dr HE 


fERHDDE RZ S SSD 存 储 系统 
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。 响应 时 间 短 
传统 硬盘 的 机 械 特 性 导致 大 部 分 时 间 浪 费 在 寻 道 和 机 械 延迟 上 ， 数 据 传输 效率 受到 严 
重 制约 。 而 SSD 硬 盘 内 部 没有 机 械 和 运动 部 件 》 省 去 了 寻 道 时 间 和 机 械 延迟 ， 可 更 快捷 的 响 
应 读 写 请 求 
。 读 写 效 率 高 
机 械 硬盘 在 进行 随机 读 写 操作 了 时， 磁头 不 停 地 移动 ， 导 致 读 写 效率 低下 ， 而 SSD 通 过 
内 部 控制 器 计算 出 数据 的 春 歼 位 宣 ， 并 进行 读 写 操作 ， 省 去 了 机 械 操作 时 间 ， 大 大 提高 了 
读 写 效率 。4K 随 机 读 写 情况 下 : FC 硬盘 的 性 能 为 400/400 IOPS，SSD 硬 盘 的 性 能 关 
26000/5600 IOPS 


460 


SSD 功 耗 优 势 


à 
AAA 


LE 
Cl 
UK 


2 块 
功 耗 (W) 


4000 
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较 少 的 硬盘 功 耗 优势 不 是 很 明显 ， 但 是 当 使 用 大 量 的 磁盘 数量 的 时 候 ， 功 耗 所 产生 的 
成 本 差别 就 比较 大 ， 也 成 为 企业 在 选择 方案 时 候 的 一 个 考虑 因素 。 
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SSD 的 环境 适应 优势 


。 SSD 不 含 高 速 旋转 的 机 械 结构 部 件 ， 可 经 得 住 严 苛 的 环境 考验 ， 以 华为 SSD 硬 盘 为 例 ; 
o HSSD 可 承受 振动 加 速度 16.4G， 机 械 硬 盘 一 般 为 0.5G 以 下 
o ”HSSD 抗 冲击 1500G， 机械 硬盘 一 般 为 70G 左 右 


。 HSSD 使 用 专用 设备 做 过 如 下 测试 : 
o ” 静 压 试验 、 跌 落 试验 、 随 机 振动 试验 、 冲 击 试验 、 碰 撞 试 验 














SSD 可 用 在 一 些 环境 较 恶 劣 的 场合 ， 如 高 温 高 湿 、 强 震 等 恶劣 环境 下 使 用 ， 比 如 很 多 
工业 级 应 用 要 求 55D 固 态 硬 盘 做 到 -20 到 70 摄 氏 度 和 -40 到 85 摄 氏 度 的 宽 温 要 求 。 
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SSD 在 存储 中 的 应 用 


访问 频率 。 A 级 应 用 : 以 高 并 发 随机 读 写 为 主 ， 如 数据 库 应 用 ; 
。 B 级 应 用 : 顺序 读 写 的 大 容量 文件 、 图 片 、 流 媒体 等 
。 CREA: 以 备份 数据 为 主 ， 起 机 少 使用 的 数据 《2 


SSD 介 质 FC/SAS 磁 盘 ”SATA/NL-SAS/ 磁 带 
s] Ea 
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。 二 八 原则 


oO 用 户 需要 频繁 改动 或 读 写 的 数据 和 一 般 占 存储 总 量 的 20% ， 称 为 热 数据 ， 对 应 于 
A 级 应 用 。 


。 分 级 存储 


0 将 热 数 据 存放 在 SSD 汪 ，B 级 和 C 级 应 用 的 数据 存放 在 高 速 HDD 和 一 般 HDD 上 ， 
提升 性 能 并 减少 投资 


0 40 
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主机 核心 组 件 
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主机 的 核心 组 件 由 CPU， 存 储 设 备 ，MO 设 备 三 个 部 分 组 成 ， 这 三 个 部 分 通过 总 线 互 
联通 讯 。 
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CPU 的 组 成 


。 CPU 由 运算 器 、 控 制 器 和 寄存 器 及 实现 它们 之 间 联 系 的 数据 、 控 制 
及 状态 的 总 线 构成 。 


下 一 了 一》 数据 信号 





à - -> 控制 信号 


W Huawei 








CPU 的 运作 原理 可 分 为 四 个 阶段 : SEM Fetch) 、 解 码 (Decode) 、 执 行 ( 
Execute) 和 写 回 (Writeback) 。 CPU 从 存储 器 或 高 速 缓冲 存储 器 中 取出 指令 ， 放 入 指 
令 寄存 器 ， 并 对 指令 译 码 ， 并 执行 指令 。 
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CPU 的 指令 


e CICS 指 令 

o Intel X86 架构 的 CPU 
o RISC 指 令 集 

o PowerPC 处 理 器 、SPARC 处 理 器 
。 EPIC 指 令 


o lntel 的 安 腾 Itanium CPU 
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。 CISC 指 令 集 


CISC (Complex Instruction Set Computer) 指令 集 ， 也 称 为 复杂 指令 集 。 英 特 尔 
生产 的 x86 系 列 CPU 及 其 兼容 CPU， 如 AMDYN VIA 都 是 属于 CIlSC 的 范畴 。 由 于 Infel X86 系 
列 及 其 兼容 CPU 都 使 用 X86 指令 集 ， 所 以 就 形成 了 今天 庞大 的 X86 系列 及 兼容 CPU 阵 容 。 

。 RISC 指 令 集 

RISC (Reduced Instruction Set Computing ) 即 “ 精 简 指 令 集 ”。 它 是 在 CISC 指 
令 系 统 基 础 上 发 展 起 来 的 SURISC 指 令 系 统 更 加 适合 高 档 服务 器 的 操作 系统 UNIX，Linux 也 
属于 类 似 UNIX 的 操作 系统 。RISC 型 CPU 与 Infel 和 AMD 的 CPU 在 软件 和 硬件 上 都 不 兼容 。 


在 中 高 档 服务 器 中 采用 RISC 指 令 的 CPU 主 要 有 以 下 几 类 : PowerPC 处 理 器 、SPARC 处 理 
器 、PA-RISC 处 理 器 、MIPS 处 理 器 、Alpha 处 理 器 。 


。 EPIC 指令 集 


EPIC (Explicitly Parallel Instruction Computers， 精 确 并 行 指令 计算 机 ) 可 以 说 是 
Intel 的 处 理 器 迈 向 RISC 体 系 的 重要 步骤 。Intel 采 用 EPIC 技 术 的 服务 器 CPU 是 安 腾 Itanium 
， 也 是 |A-64 系 列 中 的 第 一 款 。 微 软 也 已 开发 了 64 位 的 操作 系统 ， 在 软件 上 加 以 支持 。 
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SDR (synchronous) 同步 动态 随机 存 取 存 储 器 ， 这 种 内 存 的 特性 是 在 一 个 内 存 时 钟 
周期 中 ， 在 一 个 方 波 上 升 沿 时 进行 一 次 操作 { 读 或 写 ), 一 般 有 两 个 缺口 ; 

DDR (DOUBLE DATA RATE) : _ SDRAM 的 更 新 换代 产品 ， 他 允许 在 时 钟 脉冲 的 上 升 
沿 和 下 降 沿 传输 数据 ， 这 样 不 需要 提高 时 钟 的 频率 就 能 加 倍 提高 SDRAM 的 速度 。DDR 内 
存 不 向 后 兼容 SDRAM。 

DDR2 采 用 和 DDR1 内 存 一 样 的 指令 ,工作 频率 比 DDR1 更 高 ，DDR2 的 缺口 比较 靠 中 
间 ; 

DDR3 与 DDR2 的 基础 架构 并 没有 本 质 的 不 同 ，DDR3 能 提供 更 高 的 外 部 数据 传输 率 ， 
更 先进 的 地 址 /命令 与 控制 总 线 的 拓 朴 架构 ， 在 保证 性 能 的 同时 将 能 耗 进一步 降低 。 

目前 普及 的 是 BDR3 内 存 ,主要 参数 有 容量 、 主 频 、 带 宽 。 
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存储 设备 


硬盘 : 是 电脑 主要 的 存储 媒介 之 一 ， 由 一 个 或 者 多 个 铝 制 或 者 玻璃 制 的 矶 
片 组 成 

磁带 : 是 一 种 用 于 记录 声音 、 图 像 、 数 字 或 其 他 信号 的 载 有 磁 层 的 带 状 材 
料 ， 是 产量 最 大 和 用 途 最 广 的 一 种 磁 记 录 材 料 

光盘 : 光盘 以 光 信息 做 为 存储 物 的 载体 

Flash 存 储 : 一 种 不 挥发 的 内 存 器 件 


Flash 存 储 
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硬盘 
oO 寻 址 访问 、 数 据 存 储 速度 快 ， 成 本 高 
o 适合 做 快速 响应 访问 的 场合 
磁带 
o 顺序 读 写 、 读 写 速 度 快 % 容量 大 、 脱 机 存放 容易 、 成 本 低 
o 适合 做 长 期 保存 、 快 速 读 写 的 场合 
光盘 
o 寻 址 访问 、 保 存 简 单 、 可 靠 性 高 、 低 成 本 
o 适合 做 长 期 保留 ， 对 写 速 度 要 求 不 高 的 场合 
Flash 存 储 
oO 能 长 久保 持 数据 ， 容 量 可 观 ， 携 带 方 便 
o 适合 做 长 期 保存 ， 对 读 速 度 要 求 不 高 的 场合 
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什么 是 总 线 ? 


。 计算 机 总 线 是 计算 机 内 部 各 个 组 件 之 间 ， 或 者 在 不 同 的 计算 机 之 间 
进行 数据 传输 的 公共 通路 。 
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CPU 通 过 系统 总 线 读 取 内 存 中 的 指令 、 通 通过 指令 的 计算 结果 对 内 存 进行 读 写 操作 ， 
CPU 和 内 存 之 间 通 过 高 速 的 北桥 芯片 互联 。 


主机 总 线 指 一 些 适 配器 连接 到 南 桥 的 总 线 ， 比 如 显卡 ， 网 卡 ，RAID 卡 ，FC HBA 卡 等 
MO 总 线 指 适 配器 与 外 部 设备 相连 的 总 线 ， 比 如 硬盘 ，U 盘 ， 存 储 等 。 
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ZA ÉPCI-E 2 7 ? 


e Intel 在 2001 年 春季 的 IDF 上 ， 正 式 公 布 了 旨 在 取代 PCI 总 线 的 第 三 代 VO 技术 ， 
最 后 却 被 正式 命名 为 PCI- Express ，Express 意思 是 高 速 、 特 别 快 的 意思 。 


Example Connectors 


Single direction: 2 5bps/2 
Dual Directions bp Ti A 


Single direction: 10 Gbps/8 MB 
Dual Directions: 20 Gbp 
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随 着 计算 机 技术 的 发 展 ，PCI 总 线 已 经 无 法 满足 电脑 性 能 提升 的 要 求 ， 必 须 由 带宽 
大 、 适 应 性 更 广 、 发 展 潜力 更 深 的 新 一 代 总 线 取而代之 ， 这 就 是 PCI-EXpress 总 线 。 


Intel 在 2001 年 春季 的 IDF 上 ， 正 式 公 布 了 旨 在 取代 PCl 总 线 的 第 三 代 I/O 技术 ， 最 后 却 
被 正式 命名 为 PCI- Express, Expres ARERR, FIRAR E. 


2002 年 7 月 23 日 ，PCILSIG 正式 公布 了 PCI Express 1.0 规范 ， 并 且 根 据 开发 蓝图 ， 在 
2006 年 的 时 候 正 式 推出 PCI Express2.0 规 范 。 


经 历 着 这 么 三 代 半 (ACP 总 线 只 是 一 种 增强 型 的 PCI 总 线 ) 的 发 展 ，PC 的 外 部 总 线 终 
于 发 展 到 我 们 现在 看 到 的 PCI-E 2.0， 提 供 了 比 以 往 总 线 大 得 多 的 带宽 。 


目前 的 主流 应 用 是 X8 和 X16。 
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PCI-E 的 优势 


多 点 
虚拟 通道 
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。 点 对 点 独 享 带宽 : 


PCI 是 所 有 设备 共享 同一 条 总 线 资源 ,ANPCIE 采 用 点 对 点 技术 ， 芯 片 之 间 用 接口 连 线 ， 
设备 之 间 用 数据 电缆 。 


。 NAŠ, BRŽ: 


类 似 于 全 双 工 模式 ， 速 度 太 提升 1.0 版 本 的 PCFE 在 每 个 信道 单方 向 2.2Cpbs 的 传输 
速率 作为 起 步 ， 物 理 上 可 达到 1-32 个 可 选 信 道 ; 


。 热 插 拨 热 交 换 : 


PCI-E 总 线 接口 揪 权 中 含有 “ 热 拨 插 检测 信号 ” ， 所 以 可 以 像 USB 总 线 那样 进行 热 插 拨 
和 热 交换 ; 


。 多 点 虚拟 通道 : 


类 似 于 InfiniBgand，PCFE 总 线 技术 在 每 一 个 物理 通道 中 也 支持 多 点 虚拟 通道 ， 理 论 上 
每 一 个 单 物 理 通道 中 可 以 有 8 条 虚拟 通道 进行 独立 的 通信 控制 ， 而 且 每 个 通信 的 数据 包 都 
可 以 定义 不 同 的 QoSs。 


。 APCE 


以 前 的 PCI 可 以 在 PCFE 的 这 一 模式 下 运行 ， 为 用 户 提供 了 一 个 平滑 的 升级 平台 ， 但 要 
注意 的 是 不 兼容 目前 的 AGP 接 口 。 
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42 主机 软件 系统 


4.3 主机 管理 
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逻辑 卷 管理 器 


。 逻辑 卷 管理 器 (Logical Volume Manage,LVM) 
o ”逻辑 卷 (Logical Volume) 
o 卷 组 (Volume Group) 
o 物理 卷 (PhysicalVolume) 
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在 主机 软件 系统 中 ， 操 作 系统 上 层 的 应 用 软件 用 于 满足 用 户 不 同 领域 、 不 同业 务 应 用 
需求 ， 操 作 系统 实现 对 计算 机 硬件 与 软件 资产 管理 ， 并 提供 用 户 与 系统 交互 的 操作 界面 。 
不 同 的 操作 系统 使 用 其 各 自 的 文件 系统 ， 文 件 系统 建立 在 逻辑 卷 的 基础 上 。 

。 逻辑 卷 

逻辑 卷 改变 了 数据 的 存储 方式 淮 使 数据 的 存储 更 具有 灵活 性 ， 一 个 逻辑 卷 可 以 跨越 多 
个 物理 磁盘 ， 数 据 存 储 在 物理 上 可 以 是 不 连续 的 。 逻 辑 卷 是 建立 在 卷 组 之 上 的 , 卷 组 中 的 空 
间 可 以 建立 多 个 逻辑 卷 ,并 蛙 逻 辑 卷 可 以 随意 从 卷 组 的 空 闪 空间 中 增 减 ,逻辑 卷 可 以 属于 一 
个 卷 组 ,也 可 以 属于 不 同 的 多 个 卷 组 。 


。 卷 组 
卷 组 是 建立 在 物理 卷 之 上 ,一 个 卷 组 中 可 以 包含 一 个 物理 卷 组 或 者 多 个 物理 卷 。 
。 物理 卷 


物理 卷 在 逻辑 卷 管理 器 中 属于 最 底层 的 ,任何 的 逻辑 卷 和 卷 组 都 必需 依靠 物理 卷 来 建立 
,物理 卷 可 以 是 一 个 完整 的 硬盘 ,也 可 以 是 硬盘 中 的 莫 一 个 分 区 。 


60 [ 


文件 系统 


。 文件 系统 : 是 指 把 文件 存储 于 硬盘 时 所 必须 的 数据 结构 及 硬盘 数据 的 管理 
方式 。 





主机 : 文件 系统 


最 新 用 户 名 [254 doc 
单 ,xls S s 
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为 了 访问 硬盘 中 的 数据 ， 就 必需 在 扇 区 之 问 建 立 联系 ， 也 就 是 需要 一 种 逻辑 上 的 数据 
存储 结构 。 建 立 这 种 逻辑 结构 就 是 文件 系统 要 做 的 事情 ， 在 硬盘 上 建立 文件 系统 的 过 程 通 
常 称 为 “格式 化 ”。 

硬盘 数据 的 管理 通过 文件 分 区 表 。 记录 数据 的 地 址 ， 然 后 通过 地 址 记录 实现 对 数据 的 
读 取 。 
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文件 系统 功能 


文件 系统 功能 
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文件 系统 的 功能 包括 : 管理 和 调度 文件 的 存储 空间 ， 提 供 文 件 的 逻辑 结构 、 物 理 结构 
和 存储 方法 ;实现 文件 从 标识 到 实际 地 址 的 映射 ( 即 按 名 存 取 ) ， 实 现 文件 的 控制 操作 和 存 取 
操作 (包括 文件 的 建立 、 撤 销 、 打 开 、 关 闭 入 对 文件 的 读 、 写 、 修 改 、 复 制 、 转 储 等 )， 实 
现 文件 信息 的 共享 并 提供 可 靠 的 文件 保密 和 保护 措施 ， 提 供 文 件 的 安全 措施 (文件 的 转 储 和 
恢复 能 力 ) 。 
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操作 系统 的 主要 功能 


进程 管理 (Processing management) 
内 存 管理 (Memory management) 
网 络 通讯 (Networking) 

安全 机 制 (Security) 

用 户 界 面 (User interface) 

驱动 程序 (Device drivers) 
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管理 进程 间 的 通讯 ， 进 程 异常 终止 以 及 进程 死 锁 等 ; 
。 内 存 管理 

提供 寻找 可 用 内 存 空间 ， 配 置 与 释放 内 存 空间 等 ; 
。 网 络 通讯 

提供 通讯 协议 的 协商 4 
。 安全 机 制 


操作 系统 提供 外 界 直接 或 间接 使 用 资源 的 管道 ， 提 供 一 定 的 安全 机 制 来 控制 不 同 使 用 
人 员 的 使 用 权限 ; 


。 用 户 界 面 
提供 图 形 化 的 界面 ， 方 便 人 机 交互 ; 
。 驱动 程序 
通过 驱动 程序 来 屏蔽 各 厂商 设备 的 差异 ， 操 作 系统 提供 统一 的 接口 来 管理 设备 。 
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主机 存储 应 用 





| 系统 调用 接口 








| 
EEE 








设备 驱动 














| ERR | 
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图 的 左边 为 主机 内 部 的 存储 ID ， 大 部 分 MO 开始 于 要 访问 数据 的 应 用 ， 应 用 通常 不 管 
存储 的 细节 ， 而 是 直接 调用 由 操作 系统 提供 的 系统 调用 接口 ， 然 后 由 文件 系统 为 数据 提供 
数据 的 逻辑 地 址 和 在 磁盘 上 存储 的 物理 地 址 的 映射 ， 表 通过 设备 驱动 层 ， 主 要 是 3C5I 协 议 
的 操作 ， 将 数据 存储 到 硬盘 上 。 


图 的 右边 为 主机 通过 网 络 的 存储 IO ， 首 先 VO 由 应 用 发 起 ， 然 后 经 过 操作 系统 ， 由 文 
件 系统 提供 数据 的 逻辑 地 址 和 存储 的 物理 地 址 的 对 应 关系 ， 经 由 设备 驱动 ， 到 达 FC HBA 
卡 或 者 网 卡 ， 到 达 存 储 端的 FC 接口 或 者 网 络 接 口 ， 将 数据 存储 到 存储 设备 上 。 
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42 主机 软件 系统 


4.3 主机 管理 
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IPMI 


。 IPMI 是 智能 型 平台 管理 接口 (Intelligent Platform Management 
Interface) 的 缩写 ， 是 管理 基于 Intel 结 构 的 企业 系统 中 所 使 用 的 外 
围 设备 采用 的 一 种 工业 标准 。 


| 2004Fintel£ 
| 表 了 IPMI 2.0 
”2001 年 IPMI 从 的 规格 
1.0 版 改版 至 1.5 
版 


“1998 年 Intel、 
DELL, HPH 
NEC 共 同 提出 
IPMI 规 格 
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一 般 的 主机 管理 方式 为 本 地 管理 ， 而 服务 器 天 多 数 运行 在 专用 的 机 房 或 者 数据 中 心 ， 
为 了 实现 对 存放 在 非 本 地 工作 环境 的 服务 器 远程 管理 ， 开 发 了 IPMI 技 术 ， 通 过 IPMI 技 术 可 
远程 连接 至 服务 器 对 服务 器 进行 管理 。 

智能 平台 管理 接口 (PM) 是 一 种 开放 标准 的 硬件 管理 接口 规格 ， 定 义 了 骨 入 式 管 理子 
系统 进行 通信 的 特定 方法 。IPMI 信息 通过 基板 管理 控制 器 BMC) 进行 交流 。 使 用 低级 硬 
件 智 能 管理 而 不 使 用 操作 系统 进行 管理 。 

基于 Intel 结 构 的 企业 系统 中 所 使 用 的 外 围 设备 采用 的 一 种 工业 标准 ， 该 标准 由 英特尔 
、 患 普 、NEC、 美 国 戴尔 电脑 和 SuperMicro 等 公司 制定 。 用 户 可 以 利用 IPMI 监 视 服 务 器 
的 物理 健康 特征 ， 如 温度 、 电 压 、 风 扇 工 作 状 态 、 电 源 状 态 等 。 而 且 更 为 重要 的 是 IPMI 是 
一 个 开放 的 免费 标准 , 用户 无 需 为 使 用 该 标准 而 支付 额外 的 费用 。 

e 1998 年 InfelADELE、HP 及 NEC 共 同 提 出 IPMI 规 格 ， 可 以 透 过 网 路 远 端 控制 温度 、 电 压 
e 2001 年 IPMI 从 1.0 版 改版 至 1.5 版 ， 新 增 PCI Management Bus 等 功能 。 


e 2004 年 Infel 和 发 表 了 IPMI 2.0 的 规格 ， 能 够 向 下 相 容 IPMI 1.0 及 1.5 的 规格 。 新 增 了 
Console、Redirection， 并 可 以 通过 Por、Modem 以 及 Lan 远 端 管理 伺服 器 ， 并 加 强 
了 安全 sSvVYLAN 和 刀锋 伺 器 的 支援 性 。 
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IPMI 的 工作 原理 


。 IPMI 的 核心 是 一 个 专用 芯片 /控制 器 (叫做 服务 器 处 理 器 或 基板 管理 控制 器 
(BMG)， 其 并 不 依赖 于 服务 器 的 处 理 器 、BIOS 或 操作 系统 来 工作 ， 是 一 个 
单独 在 系统 内 运行 的 无 代理 管理 子 系统 。 





主板 





CPU 











7 à 
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IPMI 的 核心 是 一 个 专用 芯片 /控制 器 (叫做 服务 器 处 理 器 或 基板 管理 控制 器 (BMC))， 其 
并 不 依赖 于 服务 器 的 处 理 器 、BIOS 或 操作 系统 来 工作 ， 是 一 个 单独 在 系统 内 运行 的 无 代理 
管理 子 系统 。IPMI 民 好 的 自治 特性 便 克服 了 以 往 基 于 操作 系统 的 管理 方式 所 受 的 限制 ， 例 
如 操作 系统 不 响应 或 未 加 载 的 情况 下 其 仍然 可 以 进行 开关 机 、 信 息 提 取 等 操作 。 


在 工作 时 ， 所 有 的 IPMI 功 能 都 是 向 BMC 发 送 命 令 来 完成 的 ， 命 令 使 用 IPMI 规 范 中 规定 
的 指令 ，BMC 接 收 并 在 系统 事件 日 志 中 记录 事件 消息 ， 维 护 描述 系统 中 传感器 情况 的 传 感 
器 数据 记录 。 在 需要 远程 访问 系统 时 ，IPMI 新 的 LAN 上 串 行 (OU 特性 很 有 用 。SOL 改 变 
IPMI 会 话 过 程 中 本 地 串口 传送 方向 ， 从 而 提供 对 紧急 管理 服务 、Windows 专 用 管理 控制 台 
或 Linux 串 行 控制 人 台 的 远程 访问 。BMC 通 过 在 LAN 上 改变 传送 给 串 行 端口 的 信息 的 方向 来 
做 到 这 点 ， 提 供 了 一 种 与 广 商 无 关 的 远程 查看 启动 、 操 作 系统 加 载 器 或 紧急 管理 控制 合 来 
诊断 和 维修 故障 的 标准 方式 。 


0 


670 


BMC IP 查 看 


Change BHC User Password 





ê 

。 在 不 知道 BMC 管理 IP 的 情况 下 ， saut oss 不 同 的 服务 器 主板 位 置 可 能 
会 不 一 样 ， 一 般 在 以 下 位 置 。 

o 选择 “Advanced > IPMI Aa nfiguration” , ## “Enter” 。 XA “IPMI 


BMC Configuration” 界面 s 
& 


o 选择 “BMC Configurati , à “Enter” 。 进入 “BMC Configuration” Æ 
面 ， 显 示 BMC IPS. 


XY 


K 
Q 
Q 
Q 
N 
Q 


0 6 


登录 BMC 配 置 界 面 


HUAWEI iMana 200 [English] 


登录 到 :| 这 人 台 iMana 


ER 清空 


版 权 所 有 © 华为 技术 有 限 公司 2011-2012. 保留 一 切 权利 
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在 浏览 器 中 输入 服务 器 的 管理 IP， 会 弹出 如 图 的 登录 界面 ， 输 入 用 户 名 ， 密 码 可 对 服 
务 器 进行 管理 。 默 认 的 用 户 名 root, 默 认 的 密码 root。 
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可 
人 员 较 








70 














通 
远 


虚拟 媒体 


。 虚拟 媒体 功能 将 客户 端的 物理 光驱 或 是 I50 文 件 虚拟 成 服务 器 的 内 置 光驱 来 
使 用 。 


© HELE] mon M caps M sero118 CZ EL Ga) ©) 


Connect f 
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过 虚拟 媒体 远程 安装 服务 器 操作 系统 或 者 其 它 软 件 的 安装 ， 对 于 机 房 位 置 离 维护 
的 这 种 场景 非常 有 用 。 


服务 器 系统 启动 选项 


。 系统 第 一 启动 设备 选项 信息 ， 包 括 : 硬盘 、 光 驱 、 软 驱 /可 拔 插 移动 设备 、 
PXE(Pre-boot Execution Environment) 及 未 配置 。 该 设置 为 一 次 生效 ， 系 统 在 
下 次 启动 后 该 设置 将 失效 。 


配置 >> 系统 配置 > > 系统 局 动 选项 
通电 开机 策略 | 系统 启动 选项 | 安全 下 电 超 时 时 间 | 摘要 信息 显示 


系统 启动 选项 

硬盘 

光驱 

软驱 /可 技 插 移动 设备 
PXE 

未 配置 
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硬盘 
表示 强制 从 硬盘 启动 系统 。 
光驱 
表示 强制 从 CD/DVD 启 动 系统 
软驱 /可 拔 插 移动 设备 
表示 强制 从 软驱 或 可 拔 插 移动 设备 启动 系统 。 
PXE 
表示 强制 从 PXE 启 动 系统 。 
未 配置 
表示 不 进行 强制 设置 ， 按 BIO3 默 认 方 式 启动 系统 。 
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管理 网 口 配 置 


RE 


Pv4 


O BARRPIA X 
加 手动 设置 jp 她 址 
Pat 192 \168 |59 107 
FAD 255 \l255 lo 0 
默认 同 关 192 |168 |59 |107 
MAC 地 址 00-18-82-F0-59-07 


fe60::218:82ff:fe/0:5907 
00-18-82-F0-59-07 
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。 在 “管理 网 口 ” 界 面 中 ， 可 以 进行 如 下 配置 : 
o 使 能 /去 使 能 管理 网 口 。 
o 设置 管理 网 口 的 IPv4 地 址 获取 方式 、IPv4 地 址 、 子 网 掩 码 、 默 认 网 关 。 
oO 设置 管理 网 口 的 IPv6 地 址 获取 方式 、IPv6 地 址 、 前 缀 长 度 、 默 认 网 关 。 


远程 控制 服务 器 上 下 电 


| 电源 管理 ”>》 电源 控制 
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在 服务 器 操作 系统 无 响应 的 的 时 候 ， 可 通过 远程 上 下 电 控 制 重新 强制 重启 服务 器 。 上 
下 电 控 制 方式 包括 : LE TE EA SEA USB 复位 。 


。 LA 
表示 对 设备 上 电 。 
。 下 电 
表示 对 设备 下 电 。 
。 重启 
表示 对 设备 进行 冷 复位 > 
。 安全 重启 


表示 对 设备 进行 软 重 启 ， 即 有 注销 的 过 程 。 
e NMI (Non-maskable Interrupt) 
表示 触发 业务 系统 产生 一 个 不 可 屏蔽 中 断 。 


0 730 
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. 硬盘 的 主要 构件 有 哪些 ? 
固态 硬盘 有 哪些 优势 ? 


一 


常见 的 文件 系统 有 哪些 ? 
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© 总 结 


。 1 盯 基 础 设施 与 数据 中 心 

。 存储 的 应 用 环境 

。 机 械 硬 盘 与 SSD 硬 盘 结构 及 实现 原理 
。 主机 应 用 环境 


Copyright @ 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 65 w HUAWEI 





0 750 


附 : 华为 服务 器 产品 及 解决 方案 全 景 图 


HPC 虚拟 化 整合 小 型 机 迁移 数据 库 SAP HANA 
解决 方案 参考 架构 参考 架构 


o © 6 e & vw 


解决 方案 解决 方案 


2U2/4Nodes 
X6000 


XH310 
> 


融合 架构 刀片 服务 器 
E9000 


BH640 E : CHI21 CH220 de CH222  cH240 
2U2S 2U45 2U4S AU 45 RH5885 
RH2485 RH2488 RH5885 
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IX 


A 


@ 练习 题 


多 选 题 
1 、 存 储 在 数据 中 心 的 功能 有 () 
提供 海量 存储 
提供 集中 存储 
提供 快速 /0 响应 
提供 计算 资源 
2 、 根 据 服务 器 的 形态 划分 ， 可 将 服务 器 分 为 ( ) 
机 架 服务 器 
塔 式 服务 器 
刀片 服务 器 
部 门 级 服务 器 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 67 


1, ABC 
2, ABC 
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Thank you 


www.huawei.com 
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HC1109102 RAID 技术 及 应 用 





NG 


HUAWEI 


W 
4 


2., 


HC1109102 
RAID 技 术 及 应 用 
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Olz 


。 学 习 完 本 课程 后 ， 您 将 能 外 
o 了 解 RAID 分 类 及 原理 
o 掌握 各 种 RAID 特 点 
o 掌握 RAID 在 数据 保护 方面 所 采用 的 技术 
o 了 解 RAID2.0+ 技 术 
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QE: 


1. RAID 
1.1 RAID 基 本 概念 与 技术 原理 
1.2 RAID 技 术 与 应 用 
1.3 RAID 数 据 保 扩 
1.4 RAID 与 LUN 


2. RAID2.0+ 技 术 
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RAID 概 念 与 实现 方式 


RAID (Redundant Array of Independent Disks) : 独立 宛 余 磁盘 阵列 ， 
简称 磁盘 阵列 。 


RAID 的 主要 实现 方式 分 为 硬件 RAID 方式 和 软件 RAID 方式 
o 硬件 RAID 
o 软件 RAID 
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。 RAID 技 术 的 主要 功能 : 
o 通过 对 磁盘 上 的 数据 进行 条 带 化 亿 实现 对 数据 成 块 存 取 ， 减 少 磁 盘 的 机 械 寻 道 时 
间 ， 提 高 了 数据 存 取 速度 。 
o 通过 对 一 阵列 中 的 几 块 磁盘 同时 读 取 (并 行 访问 ) ,减少 了 磁盘 的 机 械 寻 道 时 间 ， 
提高 了 数据 存 取 速度 。 
o ”通过 镜像 或 者 存储 奇偶 校 验 信息 的 方式 ， 实 现 了 对 数据 的 见 余 保护 。 
。 目前 RAID 的 实现 方式 分 为 硬件 RAID 方 式 和 软件 RAID 方 式 。 
o ”基于 硬件 的 RAIBD 是 采用 集成 了 处 理 器 的 RAID 适 配 卡 (简称 RAID 卡 ) 来 实现 的 。 
它 拥有 自己 的 控制 处 理 器 、MO 处 理 必 片 和 存储 器 ， 减 少 对 主机 CPU 运算 时 间 的 
占用 , 提高 数据 传输 速度 。 RAID 控 制 器 负责 路 由 、 缓 冲 以 及 主机 和 磁盘 阵列 之 
间 的 数据 流 管理 。 
o 基于 软件 的 RAID 功 能 的 实现 完全 依赖 于 主机 的 CPU ， 没 有 额外 的 处 理 器 和 MO 芯 
片 ， 所 以 低速 CPU 很 难 满足 这 个 需求 。 软 件 RAID 又 分 为 基于 驱动 程序 和 基于 @ 〇 sy 


两 种 类 型 。 软 件 RAID 需 要 占用 CPU 处 理 周 期 ， 并 且 依 赖 于 操作 系统 ， 专 业 的 企业 
级 存储 设备 一 般 采 用 软件 RAID 的 实现 方式 。 


34 0 


RAID 的 数据 组 织 方式 


。 条 带 : 磁盘 中 单个 或 者 多 个 连续 的 扇 区 构成 一 个 条 带 。 它 是 组 成 分 
条 的 元 素 。 

。 分 条 : 同一 磁盘 阵列 中 的 多 个 磁盘 驱动 器 上 的 相同 “位 置 ” (或 者 
说 是 相同 编号 ) 的 条 带 。 


分 条 1 (strip) 


磁盘 上 的 数 磁盘 上 的 数 磁盘 上 的 数 
EXT 据 条 带 据 条 带 


+ 
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。 分 条 宽度 
。 指 在 一 个 分 条 中 数据 成 员 盘 的 个 数 ; 
。 分 条 深度 


o 指 一 个 条 带 的 容量 大 小 。 
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RAID 校 验 万 式 


。 XOR 校 验 的 算法 一 一 相同 为 假 ， 相 异 为 真 : 
0@0=0; 091=1; 160=1; 191=0; 


。 XOR 的 逆 运 算 仍 为 XOR : 
。 如 果 A 为 1，B 为 0， 则 校 验 值 P 为 1: A(Me B(0)=P(1) 
。 则 有 逆 运 算 : B(0) eP(T}=A(T); A(1Ne P(1)=B(0); 


86 0 
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创建 RAID 组 成 员 盘 要 求 


。 硬盘 容量 大 小 ”相同 
。 硬盘 接口 类 型 MA 
。 硬盘 速率 要 求 ”相同 
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。 在 创建 RAID 组 的 时 候 ， 要 求 尽量 使 用 同一 广 家 的 同一 型 号 硬盘 ， 这 样 在 硬盘 的 容量 ， 
接口 ， 速 率 等 方面 保持 一 致 ， 避 免 木 桶 效应 ， 否 则 创建 的 RAID 组 工作 的 时 候 按 照 最 低 
配置 的 硬盘 的 容量 ， 性 能 工作 ， 造 成 资源 的 浪费 。 
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æ 


RAID 的 几 种 状态 


创建 / 一 cas 


重建 成 7 


PACE BOB EI RE A 
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RAID 组 变 为 降级 状态 后 ， 在 重建 的 过 程 中 ， 如果 还 有 别 的 成 员 盘 出 现 故 障 ， 故 障 的 成 
员 盘 的 个 数 超过 了 阵列 的 元 余 磁盘 的 个 数 s 整个 RAID 组 将 为 变 为 失效 状态 ， 此 时 原 
RAID 组 中 的 数据 将 会 无 法 读 取 。 


QER | 


1. É RAID 
1.1 RAID 基 本 概念 与 拷 
1.2 RAID 技 术 与 应 用 


1.3 RAID 数 据 保护 


1.4 RAID 与 LUN 


2. RAID2.0+ 技 术 
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音 用 RAID 级 别 与 分 类 标准 


。 RAID 技 术 将 多 个 单独 的 物理 硬盘 以 不 同 的 方式 组 合成 一 个 逻辑 硬盘 ， 提 高 
了 硬盘 的 读 写 性 能 和 数据 安全 性 ， 根 据 不 同 的 组 合 方式 可 以 分 为 不 同 的 
RAID 级 别 。 


wa 
a 
aae 
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。 RAID 技 术 的 优势 是 : 
o 通过 把 多 个 磁盘 组 织 在 一 起 ， 作 为 一 个 逻辑 卷 提 供 磁盘 跨越 功能 。 
o 通过 把 数据 分 成 多 个 数据 块 ， 并 行 写 入 / 读 出 多 个 磁盘 ， 以 提高 访问 磁盘 的 速度 。 
D 通过 镜像 或 校 验 操作 ， 提 供 容 错 能 力 。 


0 [ 


RAID 0 实现 方式 


| 各 磁盘 上 的 数据 块 GUA RUE 
无 差错 控制 的 条 带 化 阵列 
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。 RAID 0 又 称 为 Stripe 或 Striping， 它 代表 了 所 有 RAID 级 别 中 最 高 的 存储 性 能 。RAID 0 使 
用 “分 条 ” (stipe) 技术 把 数据 分 布 到 各 个 磁 盘 上 ，RAID 0 至 少 使 用 两 个 磁盘 驱动 器 ， 
并 将 数据 分 成 从 512 字 节 到 数 兆 字 节 (一般 是 512Byte 的 整数 倍 ) 的 若干 块 ， 这 些 数据 
块 可 以 并 行 写 到 不 同 的 磁盘 中 。 第 1 块 数据 被 写 到 驱动 器 1 中 ， 第 2 块 数据 被 写 到 驱动 器 
2 中 ， 如 此 类 推 ， 当 系统 到 达 阵 列 申 的 最 后 一 个 磁盘 时 ， 就 重新 回 到 驱动 器 1 的 下 一 分 条 
进行 写 操作 ， 分 割 数据 将 MO 负载 平均 分 配 到 所 有 的 驱动 器 。 
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RAID 0 数据 写 入 


写 入 数据 块 D2,D3… 
写 入 数据 块 D1 
写 入 数据 块 D0 X 
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。 RAID 0 的 数据 写 入 是 以 分 条 形式 将 数据 均匀 分 布 到 RAID 组 的 各 个 硬盘 中 。RAID 0 的 数 
据 是 按照 分 条 进行 写 入 的 ， 即 一 个 分 条 的 所 有 分 块 写 满 后 ， 个 分 条 上 进行 
数据 写 入 。 如 上 图 ， 现 在 有 数据 DO% Di， ，D2 ，D3 ，D4 ，D5 需 要 在 RAID 0 中 进行 
写 入 ， 首 先 将 第 一 个 数据 D0 写 入 第 一 块 硬盘 位 于 第 一 个 分 条 将 第 二 个 数据 D1 写 
块 硬盘 位 于 第 一 个 分 条 的 坪 $ 至 此 ， 第 一 个 分 条 的 各 个 块 写 满 了 数据 ， 当 有 数 据 

需要 写 入 时 ， 就 要 对 下 一 个 分 条 进行 写 入 ， 将 数据 D2 写 入 第 一 | 
a 数据 块 D3，D4，B5 的 写 入 同 理 。 写 满 一 个 分 条 的 所 有 块 再 开始 在 下 一 
分 条 中 进行 写 入 。 


0 2 0 


RAID 0 数据 读 取 


CE 读 取 数据 块 D2，D3.… 
< 所 读 取 数据 块 D1 


读 取 数据 块 DOW 
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。 RAID 0 在 收 到 数据 读 取 指令 后 ， 就 会 在 各 个 硬盘 中 进行 搜索 ， 看 需要 读 取 的 数据 块 位 于 
哪 一 个 硬盘 上 ， 表 依次 对 需要 读 取 的 数据 进行 读 取 。 如 上 图 ， 现 在 收 到 读 取 数据 DO , 
D1 ，D2 ，D3 ，D4 ，D5 的 指令 ,人 首 完 从 第 一 块 磁盘 读 取 数据 块 DO， 再 从 第 二 块 磁盘 
读 取 数 据 块 D1… 对 各 个 数据 块 ， 从 磁盘 阵列 读 取 后 再 由 RAID 控 制 器 进行 整合 ， 传 送 给 
系统 ， 至 此 ， 整 个 读 取 过 程 结束 6 
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RAID 0 数据 丢失 


。 阵列 中 某 一 个 驱动 器 发 生 故 障 ， 将 导致 其 中 的 数据 丢失 。 


= 
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。 由 于 RAID 0 只 是 将 数据 按 一 定 方式 组 织 起 来 天 而 没有 在 各 个 磁盘 的 数据 块 之 间 提 供 数据 
安全 性 保护 ， 所 以 一 旦 阵列 中 有 某 一 个 驱动 器 发 生 故 障 ， 整 个 阵列 将 失效 。 


94 


RAID 1 的 工作 原理 \ 


镜像 结构 的 阵列 
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。 RAID 1 也 被 称 为 镜像 ， 其 目的 是 为 了 打造 出 三 个 安全 性 极 高 的 RAID。RAID 1 使 用 两 组 
相同 的 磁盘 系统 互 作 镜像 ， 速 度 没有 提高 但 是 允许 单个 磁盘 故障 ， 数 据 可 靠 性 最 高 。 
其 原理 为 在 主 硬盘 上 存放 数据 的 同时 也 在 镜像 硬盘 上 写 一 样 的 数据 。 当 主 硬 盘 (物理 ) 
损坏 时 ， 镜 像 硬 盘 则 代替 主 硬盘 的 工作 。 因 为 有 镜像 硬盘 做 数据 备份 ， 所 以 RAID 1 的 数 
据 安全 性 在 所 有 的 RAID 级 别 上 来 说 是 最 好 的 。 


0 950 
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RAID1 数据 写 入 


| 
a 写 入 数据 块 D2 


写 入 数据 块 D 


~ 写 入 数据 块 


$ 
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RAID 1 在 进行 数据 写 入 的 时 候 ， 并 不 是 像 RAID 0 那样 将 数据 分 条 写 入 所 有 磁盘 ， 而 是 
将 数据 分 别 写 入 成 员 盘 ， 各 个 成 员 磁 盘 上 的 数据 完全 相同 ， 互 为 镜像 。 如 上 图 ， 需 要 将 
数据 块 DO，D1，D2 写 入 RAID 1， 先 在 两 个 磁盘 上 同时 写 入 数据 块 DO0， 再 在 两 个 磁盘 
上 同时 写 入 数据 块 D1… 


RAID1 数据 读 取 


读 取 数 据 块 D2 
| 


读 取 数据 块 DO 


Mb Huawei 





RAID 1 在 进行 数据 读 取 的 时 候 ， 正 常情 况 下 本 以 实现 数据 盘 和 镜像 盘 同时 读 取 数据 ， 提 
高 读 取 性 能 ， 如 果 一 个 磁盘 损坏 ， 则 |I@ 自 动 到 存活 的 盘 读 取 数 据 。 
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RAID 1 的 数据 恢复 


DO, D1, D2 | 


更 换 /恢复 磁盘 风 复制 备份 磁盘 数据 读 写 备份 磁盘 
RARE O V 
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。 RAID 1 的 成 员 磁 盘 是 互 为 镜像 的 ， 成 员 磁 盘 的 内 容 完全 相同 ， 这 样 ， 任 何 一 组 磁盘 中 的 
数据 出 现 问题 ， 都 可 以 马上 从 其 它 成 员 磁 盘 进 行 简 像 恢复 。 如 上 图 ， 磁 盘 1 损 坏 导 致 数 
据 丢 失 ， 我 们 需要 将 故障 磁盘 用 正常 磁盘 替换 ， 再 读 取 磁 盘 2 的 数据 ， 将 其 复制 到 磁盘 1 
上 ， 从 而 实现 了 数据 的 恢复 。 
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RAID 3 的 工作 原理 


| D0, D1, D3 D3 D4, D5 D6 D7, D8 | 以 





Vi gemer Vy 














带 奇偶 校 验 码 的 并 行 阵列 
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。 RAD 3 是 带 有 专用 奇偶 位 的 条 带 化 阵列 ， 是 RAID 0 的 一 种 改进 模式 。 它 也 采用 了 类 似 


于 RAID 2 模式 中 的 奇偶 校 验 技术 ， 不 过 没有 使 用 海 明 码 技术 而 采用 较为 简单 的 异 或 算法 。 


在 阵列 中 有 一 个 驱动 器 专门 用 来 保存 其 它 驱 动 器 中 对 应 分 条 中 数据 的 奇偶 校 验 信息 。 奇 
偶 位 是 编码 信息 ， 如 果 某 个 驱动 器 中 的 数据 出 错 或 者 茶 一 个 驱动 器 故障 ， 可 以 通过 对 奇 
偶 校 验 信息 的 计算 来 恢复 出 故障 驱动 器 中 的 数据 信息 。 在 数据 密集 型 环境 或 者 是 单一 用 
户 环境 中 ， 组 建 RAID 3 对 访问 较 长 的 连续 记录 较 好 。 在 写 入 数据 时 ，RAID 3 会 把 数据 
的 写 入 操作 分 散 到 多 个 磁盘 上 进行 ， 然 而 不 管 是 向 哪 一 个 数据 盘 写 入 数据 ， 都 需要 同时 
重 写 校 验 盘 中 的 相关 信息 只 因此 ， 对 于 那些 经 常 需 要 执行 大 量 写 入 操作 的 应 用 来 说 ， 校 


验 盘 的 负载 将 会 很 大 ， 无 法 满足 程序 的 运行 速度 ， 从 而 导致 整个 RAID 系 统 性 能 的 下 降 。 


99 


RAID 3 的 数据 写 入 


< 写 入 数据 块 B 


写 入 数据 块 A 


DS 





À 
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。 RAID 3 是 单 盘 容错 并 行 传输 。 即 采用 Stripping 技 术 将 数据 分 块 ， 对 这 些 块 进行 异 或 校 
验 ， 校 验 数据 写 到 最 后 一 个 硬盘 上 。 它 的 特点 是 有 一 个 盘 为 校 验 盘 ， 数 据 以 位 或 字 节 的 
方式 存 于 各 盘 〈 分 散记 录 在 组 内 相同 扇 区 的 各 个 硬盘 上 ) 。 当 一 个 硬盘 发 生 故 障 ， 除 故 
障 盘 外 ， 写 操作 将 继续 对 数据 盘 和 校 验 盘 进行 操作 。 


0 100 [] 


RAID 3 的 数据 读 取 À 
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。 RAID3 的 数据 读 取 是 按照 分 条 来 进行 的 。 将 每 个 磁盘 的 驱动 器 主轴 马达 做 精确 的 控制 ， 
同一 分 条 上 各 个 磁盘 上 的 数据 位 同时 读 取 入 各 个 驱动 器 得 到 充分 利用 ， 读 性 能 较 高 。 
RAID 3 的 数据 读 写 属于 并 行 方式 。 
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RAID 3 的 数据 恢复 


磁盘 失效 
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RAID 3 的 数据 恢复 是 通过 对 剩余 数据 盘 和 校 验 盘 的 异 或 计算 重 构 故 障 盘 上 应 有 的 数据 
来 进行 的 。 

如 上 图 的 RAID 3 磁盘 结构 ， 当 磁盘 2 故障 ， 其 上 存储 的 数据 位 A1，B1，C1 丢 失 ， 我 们 
需要 经 过 这 样 一 个 数据 恢复 过 程 : 首先 恢复 数据 Al ， 根 据 同 一 分 条 上 其 它 数据 盘 和 校 验 盘 
上 的 数据 A0，A2，P1， 进 行 异 或 运算 ， 得 到 应 有 的 数据 A1 ， 再 用 相同 方法 恢复 出 数据 B1 ， 
C1 的 数据 ， 至 此 ， 磁 盘 2 上 的 数据 全 部 得 到 了 恢复 。 


由 于 校 验 集中 在 一 个 盘 产 因此 在 数据 恢复 时 ， 校 验 盘 写 压 力 比 较 大 ， 影 响 性 能 。 


o0 102 0 


RAID 5 的 工作 原理 à 


分 布 式 奇偶 校 验 码 的 独立 磁盘 结构 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 23 w HUAWEI 





RAID5 是 一 种 旋转 奇偶 校 验 独立 存 取 的 阵列 访 式 ， 它 与 RAID3 不 同 的 是 没有 固定 的 校 
验 盘 ， 而 是 按 某 种 规则 把 奇偶 校 验 信息 均匀 地 分 布 在 阵列 所 属 的 硬盘 上 ， 所 以 在 每 块 硬盘 
上 ， 既 有 数据 信息 也 有 校 验 信 息 。 这 一 改变 解决 了 争 用 校 验 盘 的 问题 ， 能 并 发 进行 多 个 写 
操作 。 所 以 RAID 5 即 适用 于 大 数据 量 的 操作 ， 也 适用 于 各 种 事务 处 理 ， 它 是 一 种 快速 、 大 
容量 和 容错 分 布 合理 的 磁盘 阵列 。 当 有 N 块 阵列 盘 时 ， 可 用 容量 为 N-1 块 盘 容 量 。 RAID 3、 
RAID 5 中 ， 在 一 块 硬盘 发 生 故 障 后 等 RAID 组 从 ONLINE 变 为 DEGRADED 方 式 ， 直 到 故障 
盘 恢复 。 但 如 果 在 DEGRADEB 状 态 下 ， 又 有 第 二 块 盘 故 障 ， 整 个 RAID 组 的 数据 将 丢失 。 





O0 1030 


RAID 5 数据 写 入 





NZ Huawei 


RAID 5 的 数据 写 入 也 是 按 分 条 进行 的 ， 各 个 磁盘 上 既 存储 数据 块 ， 又 存储 校 验 信息 。 
一 个 分 条 上 的 数据 块 写 入 完成 后 ， 将 产生 的 校 验 信息 写 入 对 应 的 校 验 磁盘 中 。 


0 141 


RAID 5 数据 读 取 S 


WA Huawei 





由 于 RAID 5 的 数据 是 按照 数据 分 条 存储 的 ， 在 读 取 的 时 候 ， 按 照 分 条 进行 读 取 。 
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RAID 5 数据 恢复 


磁盘 失效 数据 恢复 
< + 


N W Huawei 
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当 RAID5 中 某 一 个 磁盘 故障 ， 在 恢复 的 时 候 5 可 利用 其 它 存 活 成 员 盘 数据 进行 异 或 逆 
运算 ， 恢 复 故障 盘 上 的 数据 。 


0 161 


RAID 6 介绍 


。 RAID 6 是 带 有 两 种 校 验 的 独立 磁盘 结构 ， 采 用 两 种 奇偶 校 验方 法 ， 
需要 至 少 N+2(N>2) 个 磁盘 来 构成 阵列 ， 一 般 用 在 数据 可 靠 性 、 可 用 
性 要 求 极 高 的 应 用 场合 。 
常用 的 RAID 6 技术 有 RAID6 P+ Q 和 RAID6 DP。 xX 
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RAID 6 实际 上 是 在 RAID 5 基础 上 为 了 进一步 保证 数据 可 用 性 和 可 靠 性 设计 的 一 种 
RAID 方 式 。 与 RAID 5 相 比 除了 有 通常 的 异 或 校 验方 式 外 ， 还 增加 了 另 一 种 特殊 的 异 或 校 
验方 式 和 该 方式 校 验 数据 存放 区 域 ， 因 此 RAID 6 的 数据 元 余 性 能 相当 好 。 但 是 ， 由 于 增加 
了 一 个 核验 ， 所 以 写 入 的 效率 比 RAID 5 要 低 ， 而 且 控 制 系统 的 设计 也 更 为 复杂 ， 第 二 个 校 
验 区 也 减少 了 有 效 存储 空间 。 

。 目前 RAID 6 还 没有 统一 的 标准 ， 各 家 公司 的 实现 方式 都 有 所 不 同 ， 主 要 有 以 下 两 种 方式 ; 

a RAID P+Q: 华为 AHBS 

a RAIDDP: NetApp 

两 种 技术 获取 校 验 信息 的 方法 不 同 ， 但 是 都 能 够 在 两 块 成 员 盘 故障 的 情况 下 读 取 数 据 ， 
数据 不 丢失 。 
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RAID6 P 十 Q 的 工作 原理 


RAID6 P+ Q 需 要 计算 出 两 个 校 验 数据 P 和 Q， 当 有 两 个 数据 丢失 时 ， 根 据 P 和 
Q 恢 复出 丢失 的 数据 。 校 验 数 据 P 和 Q 是 由 以 下 公式 计算 得 来 的 : 


P=D0@ D1 @ D2 
Q=(a@D0)E(B@D1)(v@D2) 


1 ”驱动 器 1 驱动 器 驱动 3 D ERIE: 驱动 器 5 
D(C D? 
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在 RAID6 P+Q 中 ，P 和 @ 是 两 个 相互 独立 的 校 验 值 ， 它 们 的 计算 互 不 影响 ， 都 是 由 同 
分 条 上 其 它 数据 磁盘 上 的 数据 依据 不 同 的 算法 计算 而 来 的 。 


其 中 P 值 的 获得 是 通过 同一 分 条 上 除 P 和 Q 之 外 的 其 它 = aE 
算得 到 。Q 值 的 获得 过 程 就 相对 复杂 一 些 》 它 首先 对 同一 分 条 其 他 磁盘 上 的 各 个 数据 分 别 
进行 一 个 变换 ， aies E Re ren 这 个 变换 被 
称 为 CF 变 换 ， 它 是 一 种 常用 的 数学 变换 方法 ， 可 以 通过 查 CF 变 换 表 而 得 到 相应 的 变换 系 
数 ， 两 将 各 个 磁盘 上 的 数据 号 ee 沉 系 数 进行 过 算 就 得 到 了 GF 交 换 后 的 数据 这 个 变换 过 程 
是 由 RAID 控 制 器 来 完成 的 


以 上 图 为 例 ，P1 是 由 分 条 0 中 的 数据 DO0、D1、D2 进 行 简 单 的 异 或 运算 而 得 到 的 。 同 
理 ，P2 是 由 分 条 1 中 的 数据 D3、D4、D5 进 行 简单 的 异 或 运算 而 得 到 ， P3 是 由 分 条 2 中 的 
数据 D6、D7、D8 进 行 简单 的 异 或 运算 而 得 到 。 


Q1 是 由 分 条 0 中 的 数据 DO、D1、D2 分 别 进行 GF 变换 之 后 再 进行 异 或 运算 而 得 到 的 。 
同 理 ，Q2 是 由 分 条 1 中 的 数据 D3、D4、D5 分 别 进行 GF 变换 之 后 再 进行 异 或 运算 而 得 到 ， 
Q3 是 由 分 条 2 中 的 数据 D6、D7、D8 分 别 进行 GF 变换 之 后 再 进行 异 或 运算 而 得 到 。 


当 某 一 个 分 条 中 有 一 块 磁盘 发 生 故 障 ， 根 本 不 需要 Q ， 直 接 用 校 验 值 P 与 其 他 正常 数据 
进行 异 或 运算 就 可 以 恢复 出 故障 盘 上 面 的 数据 ， 数 据 恢复 比较 方便 。 当 分 条 中 有 两 块 磁盘 
发 生 故 障 ， 如 果 其 中 包含 Q 所 在 的 磁盘 ， 则 可 以 先 恢复 出 数据 盘 上 面 的 数据 ， 再 恢复 出 校 
验 盘 Q 上 的 校 验 值 ; 如 果 故 障 盘 不 包含 Q@ 所 在 的 盘 ， 则 可 以 将 两 个 校 验 公式 作为 方程 组 ， 
从 而 可 以 恢复 出 两 个 故障 盘 上 面 的 数据 。 
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RAID6 DP 的 工作 原理 


。 DP 一 Double Parity， 就 是 在 RAID4 所 使 用 的 一 个 行 XOR 校 验 磁 盘 的 基础 上 又 
增加 了 一 个 磁盘 用 于 存放 斜 向 的 XOR 校 验 信息 


。 横向 校 验 盘 中 P0 一 P3 为 各 个 数据 盘 中 横向 数据 的 校 验 信息 
fil: PO=D0 XOR D1XOR D2 XOR D3 X 


。 斜 向 校 验 盘 中 DP0 一 DP3 为 各 个 数据 盘 及 横向 校 验 盘 的 斜 向 数据 校 验 信息 
fl: DPO=DOXOR D5 XOR D10 XOR D15 
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RAID6 DP 同样 也 有 两 个 相互 独立 的 校 验 信息 抉 ， 但 是 与 RAID6 P+ Q 不 同 的 是 ， 它 的 
第 二 块 校 验 信息 是 斜 向 的 。 横 向 校 验 信息 和 矢 向 校 验 信 息 都 使 用 异 或 校 验算 法 而 得 到 ， 横 
向 校 验 盘 中 的 信息 的 获得 方法 非常 简单 $ PO 是 由 条 带 0 中 的 数据 DO0、D1、D2、 D3 进行 简 
单 的 异 或 运算 而 得 到 的 。 同 理 ， P1 是 由 分 条 1 中 的 数据 D4、D5、D6、D7 进 行 简单 的 异 或 
运算 而 得 到 …… 

BPO=DO e D1 e D2 e D3#XP1=D4 e D5 e D6 6 D7 


斜 癌 校 验 盘 中 校 验 信 息 的 获得 依然 是 采用 数据 之 间 的 异 或 运算 ， 只 是 数据 块 的 选取 相 
对 复杂 一 些 ， 是 一 个 斜 向 的 选取 过 程 : 


由 分 条 0 上 面 第 到 个 磁盘 上 的 数据 DO0、 分 条 1 上 面 第 二 个 磁盘 上 的 数据 D5、 分 条 2 上 面 
第 三 个 磁盘 上 的 数据 D10、, 分 条 3 上 面 第 四 个 磁盘 上 的 数据 D15 经 过 异 或 校 验 而 得 到 校 验 信 
息 DP0; 由 分 条 0 上 面 第 二 个 磁盘 上 的 数据 D1、 分 条 1 上 面 第 三 个 磁盘 上 的 数据 D6、 分 条 2 
上 面 第 四 个 磁盘 上 的 数据 D11、 分 条 3 上 面 校 验 盘 上 面 的 信息 P3 经 过 异 或 校 验 而 得 到 校 验 信 
息 DP1; 由 分 条 0 烤 面 第 三 个 磁盘 上 的 数据 D2、 分 条 1 上 面 第 四 个 磁盘 上 的 数据 D7、 分 条 2 
上 面 校 验 盘 上 面 的 信息 P2、 分 条 3 上 面 第 一 个 磁盘 上 的 数据 D12 经 过 异 或 校 验 而 得 到 校 验 信 





BJDPO=DO e D5 e D10 e D15; DPI=DI e D6 e DIT e P3 


RAIDE DP 人 允许 阵列 中 同时 有 两 个 磁盘 失效 ， 我 们 以 上 图 为 例 ， 假 设 磁盘 1、2 故 障 ， 则 
数据 D0、D1、D4、D5、D8、D9、D12、D13 失 效 ， 其 他 磁盘 数据 和 校 验 信息 正常 。 我 们 
来 看 一 下 数据 恢复 是 怎样 一 个 过 程 : 首先 根据 DP2 和 和 斜 向 校 验 恢复 出 D12，D12 =D2 e D7 
e P2 e@ DP2， 然 后 利用 P3 和 横向 校 验 恢复 出 D13， D13 =D12 e D14 e DI5 eP3 ; 
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RAID6 DP 的 工作 原理 


。 DP 一 Double Parity， 就 是 在 RAID4 所 使 用 的 一 个 行 XOR 校 验 磁 盘 的 基础 上 又 
增加 了 一 个 磁盘 用 于 存放 斜 向 的 XOR 校 验 信息 
。 横向 校 验 盘 中 P0 一 P3 为 各 个 数据 盘 中 横向 数据 的 校 验 信息 
例 : PO=D0 XOR D1 XOR D2 XOR D3 X 
。 和 斜 向 校 验 盘 中 DP0 一 DP3 为 各 个 数据 盘 及 横向 校 验 盘 的 斜 向 数据 校 验 信息 
fl: DPO=D0 XOR D5 XOR D10XOR D15 
驱动 器 1 
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根据 DP3 和 和 斜 向 校 验 恢复 出 D8， D8 =D3 e Pl eDP3 e D13， 利 用 P2 和 横向 校 验 恢复 出 
D9, D? =D8 @ D10 e DIT e P2; 根据 DR4 和 和 斜 向 校 验 恢 复出 D4， 利 用 P1 和 横向 校 验 
恢复 出 D5 …… 进 而 恢复 出 磁盘 1、2 上 的 所 有 数据 。 
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RAID 组 合 一 RAID 10 


。 RAID 10 是 将 镜像 和 条 带 进 行 组 合 的 RAID 级 别 ， 先 进行 RAID 1 镜像 然后 再 做 
RAID 0。RAID 10 也 是 一 种 应 用 比较 广泛 的 RAID 级 别 。 
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RAID 10 集 RAID 0 和 RAID 1 的 优点 于 均 身 全 适合 应 用 在 速度 和 容错 要 求 都 比较 高 的 场 
合 。 先 进行 镜像 ， 再 进行 分 条 。 物 理 磁 盘 ] 和 物理 磁盘 2 组 成 RAID 1， 物 理 磁 盘 3 和 物理 磁 
盘 4 组 成 RAID 1， 两 个 RAID 1 再 进行 RAID Où 


当 不 同 RAID1 中 的 磁盘 ， 如 物理 磁盘 2 和 物理 磁盘 4 发 生 故 障 导致 数据 失效 时 ， 整 个 阵 
列 的 数据 读 取 不 会 受到 影响 ， 因 为 物理 磁盘 1 和 物理 磁盘 3 上 面 已 经 保存 了 一 份 完整 的 数据 。 
但 是 如 果 组 成 RAID 1 的 磁盘 〈 如 物理 磁盘 1 和 物理 磁盘 2) 同时 故障 ， 数 据 将 不 能 正常 读 取 。 
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RAID 组 合 一 一 RAID50 


。 RAID 50 是 将 RAID 5 和 RAID 0 进行 两 级 组 合 的 RAID 级 别 ， 第 一 级 
RAID 5， 第 二 级 为 RAID 0。 











物理 磁盘 1 HARR? PERAS 物理 磁盘 4 HRERS 物理 磁盘 6 
RAID 5 RAID% 
AID 0 











& 
à 
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RAID 50 是 RAID 5 和 RAID 0 的 结合 ， 先 将 3 个 或 3 个 以 上 磁盘 实现 RAID 5， 再 把 若干 个 
RAID 5 进行 RAID 0 分 条 。 RAID 50 需 要 至 少 6 个 磁盘 构成 ， 把 数据 分 条 后 分 放 到 各 个 RAID 
5 中 ， 在 RAID 5 中 再 进行 分 条 和 计算 校 验 值 的 分 布 式 存储 。 


物理 磁盘 1、2、3 实 现 RAID 5， 物 理 磁 盘 4、5、6 实 现 RAID 5， 再 将 两 个 RAID 5 放 在 
一 起 进行 分 条 。 人 允许 不 同 RAID 5 中 的 多 块 磁盘 同时 失效 ， 但 是 一 旦 同一 RAID 5 中 的 两 块 磁 
盘 故 障 ， 将 会 导致 阵列 失效 。 
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常用 RAID 级 别 的 比较 


om alale [a] [a 
Casse | # | un [anne [ms [ous | 
maen) 4 a | | 

me a 


随机 写 性 能 


aies | a | a | a 


N* 单 块 | (1/N)* 单 块 | (N-1)* 单 
可 用 容量 | 硬盘 容量 E 块 硬盘 容量 
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ane La ES 


4 6 块 
(N-1)* 单 | (N-2)*% | (NY2)* 单 | (N-2)* 单 
块 硬盘 容量 | 块 硬盘 容量 下 块 硬盘 容量 | 块 硬盘 容量 
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RAID 组 成 员 盘 个 数 不 建议 过 多 ， 例 如 超过 20 块 成 员 盘 的 RAID, 不 但 性 能 比 8-9 块 成 员 盘 


RAID 组 (建议 RAID5 成 员 盘 个 数 ) 低 ， 且 在 运行 把 


过 程 中 RAID 组 失效 的 概率 增加 。 
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RAID 典型 应 用 场景 


别 


随机 数据 
传输 ， 安 
全 性 要 求 
高 ， 如 邮 
件 服务 器 ， 
文件 服务 
器 等 
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名 目录 \ 


1. 传统 RAID 


1.1 RAID 基 本 概念 与 拷 


1.2 RAIDS Y FA 


1.3 RAID 数 据 保 护 


1.4 RAID 与 LUN 


2. RAID2.0+ 技 术 
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热 备 盘 


。 热 备 (Hot Spare) : 当 宛 余 的 RAID 阵 列 中 某 个 磁盘 失效 时 ， 在 不 干扰 当 
前 RAID 系 统 正 常 使 用 的 情况 下 ， 用 RAID 系 统 中 另外 一 个 正常 的 备用 磁盘 顶 
替 失 效 磁 盘 。 


热 备 通过 配置 热 备 盘 实 现 ， 热 备 盘 分 为 全 局 热 备 盘 和 局 部 热 备 盘 。 K 
热 备 盘 要 求 和 RAID 组 成 员 盘 的 容量 ， 接 口 类 型 ， 速 率 一 致 ， 最 好 是 深 用 同 


一 厂家 的 同型 号 硬盘 。 i 
+ 


X 
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e。 局 部 热 备 盘 (Dedicated Spare) 
o 适用 范围 : 所 有 元 余 RAID 组 ; 


o 特点 : 某 RAID 组 专 有 ; 仅 在 使 用 时 才 占 用 实际 的 物理 磁盘 空间 ,其 spare 空 间 分 布 
在 指定 的 磁盘 上 ; 


。 全 局 热 备 盘 (Global Spare) 
o ”适用 范围 : 所 有 宛 余 RAID 组 ; 


o 特点 : 所 有 RAID 组 共有 ; 仅 在 使 用 时 才 占 用 实际 的 物理 磁盘 空间 ; 其 ;Spare 空间 
分 布 在 指定 的 磁盘 上 。 
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MN | 


。 预 拷 贝 : 系统 通过 监控 发 现 RAID 组 中 某 成 员 盘 即将 故障 时 ， 将 即将 
故障 成 员 盘 中 的 数据 提前 拷贝 到 热 备 盘 中 ， 有 效 降低 数据 丢失 风险 。 
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在 阵列 运行 的 过 程 中 ， 可 通过 磁盘 健康 状态 检测 ， 得 出 一 系列 参数 然后 综合 分 析 该 磁 
盘 的 健康 状态 ， 然 后 再 根据 这 个 健康 状态 看 是 否 执 行 预 拷贝 的 动作 。 


0 170 


EN 


。 EM: RAID 阵 列 中 发 生 故 障 的 磁盘 上 的 所 有 用 户 数据 和 校 验 数据 的 
重新 生成 ， 并 将 这 些 数据 写 到 热 备 盘 上 的 过 程 。 


4 
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。 重 构 需 满足 以 下 条 件 : 

o 有 一 个 热 备份 盘存 在 

o 所 有 磁盘 都 配置 为 见 余 阵列 (RAID 1,3,5,6,10,50) 
。 重 构 的 所 有 操作 都 是 在 不 中 断 系 统 操作 的 情况 下 进行 的 。 
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名 目录 


. 传统 RAID 


1.1 RAID 基 本 村 


1.4 RAID 与 LUN 


RAID2.0+45 7N 
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RAID 与 LUN 的 关系 


RAID 由 几 个 硬盘 组 成 ， 从 整体 上 看 相当 于 由 多 个 硬盘 组 成 的 一 个 大 的 物理 
卷 。 

在 物理 卷 的 基础 上 可 以 按照 指定 容量 创建 一 个 或 多 个 逻辑 单元 ， 这 些 远 辑 
单元 称 作 LUN, 可 以 做 为 映射 给 主机 的 基本 块 设备 。 Ç 


C > 
逻辑 卷 逻辑 卷 Lune 
N 
\ D 


/ 


单个 物理 卷 上 创建 1 个 逻辑 卷 单个 物理 卷 上 创建 多 个 逻辑 卷 





x~ 
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RAID、 逻 辑 卷 的 形成 过 程 
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首先 由 多 块 物理 磁盘 创建 RAID ， 再 根据 业务 的 需要 ， 在 RAID 的 基础 上 划分 LUN .将 
LUN 了 映射 给 服务 器 端 ， 服 务 器 端 看 到 的 是 磁盘 的 形式 ， 而 不 是 LUN。 
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QER 


1. 传统 RAID 


2. RAID2.0+ 技 术 
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RAID2.0+ 的 发 展 \ 

















LUN 虚 拟 化 EA RAID2.0+ 
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在 最 初 的 RAID 技 术 中 ， 是 将 几 块 小 容量 廉价 的 磁盘 组 合成 一 个 大 的 逻辑 磁盘 给 大 型 机 
使 用 。 后 来 硬盘 的 容量 不 断 增 大 ， 组 建 RAID 的 初衷 不 再 是 构建 一 个 大 容量 的 磁盘 ， 而 是 利 
用 RAID 技 术 实现 数据 的 可 靠 性 和 安全 性 ， 以 及 提升 存储 性 能 ， 由 于 单个 容量 硬盘 都 已 经 较 
大 了 ， 数 据 硬盘 组 建 的 RAID 容 量 更 大 ， 然 后 再 把 RAID 划 分 成 一 个 一 个 的 LUN 了 映射 给 服务 
器 使 用 。 随 着 硬盘 技术 的 发 展 ， 单 坪 硬 盘 的 容量 已 经 达到 数 T， 传 统 RAID 技 术 在 重建 的 过 
程 中 需要 的 时 间 越 来 越 长 ， 也 增加 了 符 重 构 过 程 中 其 它 硬盘 再 坏 掉 对 数据 丢失 造成 的 风险 ， 
为 了 解决 这 一 问题 ， 块 虚拟 化 技术 应 运 而 生 ， 将 以 前 以 单 块 硬盘 为 成 员 盘 的 RAID 技 术 再 细 
化 ， 将 硬盘 划分 成 若干 的 小 块 月 以 这 些小 块 为 成 员 盘 的 方式 构建 RAID, 也 就 是 现在 业界 
所 说 的 RAID2.0+ 技 术 。 
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RAID2.0+ 关 键 原理 


© LUNO (Thick) 





LUN 1 (Thick) 
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在 RADI2.0+ 中 ， 把 硬盘 域内 每 个 硬盘 切 分 为 固定 64MB 的 块 (CK) ,硬盘 域内 同 种 类 
型 的 硬盘 被 划分 为 一 个 个 的 Disk Group DG) ， 从 同一 个 DG 上 随机 选择 多 个 硬盘 ， 
个 硬盘 选取 CK 按 照 RAID 算 法 组 成 ChunkNGCroup (CKG) ,CKG 被 划分 为 固定 大 小 的 
Extent, Thick LUN 以 Extent 为 单位 映射 到 LUN，Grain 在 Extent 的 基础 上 进行 更 细 粒 度 的 划 
分 ,Thin LUNA Grain 为 单位 映射 到 LN; 
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RAID2.0+ 软 件 逻 辑 对 象 


Disk Domain 


Storage Pool 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. w HUAWEI 





e Disk Domain (磁盘 域 ) ， 一 个 硬盘 域 上 可 以 创建 多 个 存储 池 (Storage Pool) 一 个 硬 
盘 域 的 硬盘 可 以 选择 SSD、SAS、NL-SAS 中 的 一 种 或 者 多 种 ， 不 同 硬盘 域 之 间 是 完全 隔 
离 的 ， 包 括 故 障 域 、 性 能 和 存储 资源 等 。 

a Storage Pool (存储 池 ) &s Tier》 一 个 存储 池 基 于 指定 的 一 个 硬盘 域 创建 ， 可 以 
从 该 硬盘 域 上 动态 的 分 配 Chunk (CK) 资源 ， 并 按照 每 个 存储 层级 (Tier) 的 
“RAID 策 略 ” 组 成 Chunk Group (CKG) 向 应 用 提供 具有 RAID 保 护 的 存储 资源 


o Disk Group (DG)= 兴 由 硬盘 域内 相同 类 型 的 多 个 硬盘 组 成 的 集合 ， 硬 盘 类 型 包 
括 SSD、SAS 和 NL-SAS 三 种 。 


o LD (逻辑 磁盘 ) 六 是 被 存储 系统 所 管理 的 硬盘 ， 和 物理 硬盘 一 一 对 应 。 

o Chunk ACK) “是 存储 池内 的 硬盘 空间 切 分 成 若干 固定 大 小 的 物理 空间 ， 每 块 
物理 空间 的 大 小 为 64MB， 是 组 成 RAID 的 基本 单位 。 

o Chunk Group (CKG) ， 是 由 来 自 于 同一 个 DG 内 不 同 硬盘 的 CK 按照 RAID 算 法 
组 成 的 逻辑 存储 单元 ， 是 存储 池 从 硬盘 域 上 分 配 资源 的 最 小 单位 。 


o、Extent， 是 在 CKG 基 础 上 划分 的 固定 大 小 的 逻辑 存储 空间 ， 大 小 可 调 ， 是 热点 数 
据 统计 和 迁移 的 最 小 单元 (数据 迁移 粒度 ) ， 也 是 存储 池 中 申请 空间 、 释 放空 间 
的 最 小 单位 。 


a Grqin， 在 Thin LUN 模 式 下 ，Extent 按 照 固定 大 小 被 进一步 划分 为 更 细 粒 度 的 块 
， 这 些 块 称 之 为 Grain,Thin LUN 以 Grain 为 粒度 进行 空间 分 配 ，Grain 内 的 LBA 是 
连续 的 。Thin LUN 以 Grain 为 单位 映射 到 LUN， 对 于 ThickLUN ， 没 有 该 对 象 。 
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RAID2.0+ 软 件 逻 辑 对 象 





e Volume & LUN，VYolume 即 卷 ， 是 存储 系统 内 部 管理 对 象 ; LUN 是 可 以 直接 映射 给 主 
机 读 写 的 存储 单元 ， 是 Volume 对 象 的 对 外 体现 。 
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自动 负载 均衡 ， 降 低 整 体 故 障 率 





W Huawei 


。 数据 在 存储 池 中 硬盘 上 的 自动 均衡 分 布 ， 避 和 免 子 硬盘 的 冷 热 不 均 ， 从 而 降低 了 存储 系统 
整体 的 故障 率 。 
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系统 可 靠 性 


传统 RAID RAID2.0+ 


需要 手动 配置 单独 的 全 局 或 局 部 热 备 磁盘 分 布 式 的 热 备 空间 2AFÉARE 
多 对 一 的 重 构 ， 重 构 数 据 流 串 行 写 入 单一 的 热 备 磁盘 多 对 多 的 重 构 ， 重 构 数 据 流 并 行 写 入 多 块 磁盘 


存在 热点 ， 重 构 时 间 长 负载 均衡 ， 重 构 时 间 短 
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。 华为 Oceanstor 18000 系 列 存储 系统 针对 硬盘 采用 了 多 重 故障 容错 设计 ， 具 有 
硬盘 在 线 诊 断 、DHA (Disk Health\Anelyzer， 硬 盘 故 障 诊断 与 预警 ) 、 坏 道 后 
人 台 扫 描 、 坏 道 修复 等 多 种 可 靠 性 保障 和 、 RAID2.0+ 技 术 会 根据 热 备 策略 自动 在 存 
储 池 中 预 留 一 定数 量 的 热 备 空间 ， 用 户 无 需 进行 设置 ， 当 系统 自动 检测 到 硬盘 
上 某 个 区 域 不 可 修复 的 介质 错误 或 整个 硬盘 发 生 故 障 时 ， 系 统 会 自动 进行 重 构 


， 将 受 影响 的 数据 块 数据 快速 重 构 到 其 他 硬盘 的 热 备 空间 中 ， 实 现 系统 的 快速 
AR 


0 128 [ 


快速 精简 重 构 ， 改 善 双 盘 失效 率 


CKGO (RAIDS) 


CKGIIL (RAIDS) ; 


CKG2 (RAIDS) : 
BETA | 


加 未 使用 的 CK ; 
国 热 备 块 空间 ; 
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。 左 图 传统 RAID 中 ，HDD0~HDD4 五 块 硬盘 创建 RAID5，HDD5 为 热 备 盘 ， 当 HDD1 故 障 
后 ，HDD0、HDD2、HDD3、HDD4 通 过 异 或 算法 将 重 构 的 数据 写 入 HDD5 中 ; 


。 在 右 图 的 RAID2.0+ 示 意图 中 ， 当 HDD1 故 障 后 ， 故 障 盘 HDD1 中 的 数据 按照 CK 的 粒度 
进行 重 构 ， 只 重 构 已 分 配 使 用 的 CK (图 中 HDD1 的 和 ) ， 存 储 池 中 所 有 的 硬盘 都 参与 
重 构 过 程 ， 重 构 的 数据 分 布 在 多 抉 硬盘 中 (图 中 的 HDD4 和 HDD?) 。 

。 重 构 速率 的 提升 还 得 益 于 RAID240+ 技 术 对 故障 的 处 理 更 加 精细 有 效 ，RAID2.0+ 在 原 有 
坏 道 修复 和 全 盘 失效 重 构 两 级 故障 修复 之 间 增 加 了 数据 块 的 故障 修复 ， 能 够 基于 块 ( 
CK) 的 粒度 只 重 构 已 分 配 并 使 用 了 的 空间 ， 通 过 对 实际 使 用 空间 的 有 效 识别 ， 当 硬盘 
出 现 故 障 时 ，RAID2.0+ 能 够 通过 精简 重 构 进一步 缩短 重 构 时 间 ， 降 低 数据 丢失 的 风险 


o 


o0 1290 


提升 单 LUN 性 能 








13 
g0 


1 

| 

Uo 
传统 RAID 
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。 储 的 RAID 通 常 是 以 单个 磁盘 为 粒度 来 建 xRAID，RAID 被 限制 在 有 限 的 几 个 磁盘 
能 充分 发 挥 每 个 磁盘 的 所 有 资源 。 所 以 当主 机 对 一 个 较 小 的 卷 进 行 密集 访问 时 ， 

a HEARRANMNÉÉ, CERN MÉDIA, SERA 

。 而 RAID2.0+ 技 术 基 于 Chunk 而 非 物理 磁盘 构成 RAID 。 一 个 物理 磁盘 上 的 不 同 CK 可 以 
用 于 构成 不 同 RAID 类 型 的 卷 。 这 种 基于 条 块 (CK) 的 实现 ， 可 以 在 同一 个 物理 磁盘 上 
实现 不 同 的 RAID 类 型 ， 为 每 从 卷 的 RAID 类 型 提供 更 优化 的 选择 。 

。 对 于 HV3S 阵 列 而 言 ， 即 使 是 很 外 的 卷 也 可 以 通过 CK 的 方式 分 布 到 很 多 磁盘 上 。 宽 条 带 
化 技术 使 得 小 的 卷 不 再 需要 额外 的 大 容量 即 可 获得 足够 的 高 性 能 ， 且 避免 了 磁盘 热点 。 
物理 磁盘 上 剩余 的 CK 还 可 以 用 于 其 它 的 卷 。 
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空间 动态 分 布 ， 灵 活 适 应 业务 变化 r 


虚拟 存储 资源 池 


za EE = 2 3 
“0 < LE (0 4 
L S : 


E ~ -90 


-= 


SmartThin SmartMotion SmartVirtulization 
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RAID2.0+ 基 于 业界 领先 的 块 虚拟 化 技术 实现 元 卷 上 的 数据 和 业务 负荷 会 自动 均匀 分 布 
到 存储 池 所 有 的 物理 硬盘 上 ， 借 助 于 智能 的 >mart 系 列 效率 提升 套件 ，T 系 列 存 储 系统 能 
动 根据 业务 所 需 的 性 能 、 容 量 、 冷 热 数据 等 因素 在 后 全 进行 智能 调配 ， 灵 活 地 适应 企业 业 
务 的 快速 变化 。 
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RAID 分 类 及 原理 

各 种 RAID 特 点 

RAID 在 数据 保护 方面 所 采用 的 技术 
RAID2.0+ 技 术 
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.RAID 组 的 状态 有 哪些 ? 它们 之 间 是 如 何 转换 的 ? 
.您 能 描述 一 下 RAID5 的 数据 组 织 方式 和 重 构 过 程 是 如 何 实现 的 % K 


.RAID5 和 RAID1 的 应 用 场景 有 区 别 吗 ?有 哪些 ? 

. 在 客户 更 关注 可 靠 性 和 性 能 的 情况 下 ， 给 客户 推荐 合适 的 RAID 方 案 
有 哪些 ? 

. RAID 与 LUN 的 关系 是 什么 ? 
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@ 练 习题 


多 选 题 
1 、 以 下 阵列 类 型 中 ， 具 有 克 余 功能 的 有 () 
RAIDO 


A. 
B. RAIDI 
G, 


RAID3 
D. RAIDS 

判断 题 

1、 在 RAID10 中 ， 任 意 两 块 磁盘 出 故障 都 不 影响 读 取 数 据 。(T or F) 


2、RAID2.0+ 技 术 将 硬盘 划分 成 若干 的 小 块 ， 再 以 这 些小 块 为 成 员 盘 的 方式 构 
建 RAID。 (TorF) 
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Thank you 
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目标 


。 学 习 完 本 章节 后 ， 您 将 能 够 : 
o 熟悉 存储 阵列 系统 的 组 成 
o 掌握 华为 存储 阵列 的 技术 
o 掌握 华为 存储 阵列 基础 配置 
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© 目录 


. 存储 阵列 系统 组 成 


El SE = Nb he Ti Li JS 
化 为 在 使 阵列 技术 
= /YT Ta PES UE 


AE SL RENE T + 
华为 存储 阵列 基 
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存储 系统 基本 组 成 


。 容 灾 解 决 方案 
。 备 份 解决 方案 
A 
。 存 储 管理 软件 (ISM) 
。 快照 、 镜 像 软件 

\ 。 备 份 软件 

存储 软件 


解决 方案 


。 外 置 存储 系统 。 存 储 连 接 设 备 
a FC HBA 卡 
存储 硬件 a NAS BFC HAL 
人 a 磁带 库 a 以太 网 交换 机 
o 虚拟 磁带 库 o 连接 线 缆 
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当今 的 存储 技术 不 是 一 个 单独 而 孤立 的 技术 这 实际 上 ， 完 整 的 存储 系统 应 该 是 由 一 系 
列 组 件 构成 。 目 前 ， 人 们 把 存储 系统 分 为 了 硬件 架构 部 分 、 软 件 组 件 部 分 以 及 实际 应 用 时 
的 存储 解决 方案 部 分 。 硬 件 部 分 又 分 为 外 置 的 存储 系统 ， 主 要 是 指 人 们 实际 的 存储 设备 ， 
比如 磁盘 阵列 、 磁 带 库 等 。 因 为 软件 组 件 的 存在 ， 使 存储 设备 的 可 用 性 得 到 了 大 大 的 提高 ， 
数据 的 镜像 、 复 制 ， 自 动 的 数据 备份 等 等 数据 操作 都 可 以 通过 对 存储 软件 的 控制 来 完成 。 
一 个 设计 良好 的 存储 解决 方案 ,是 使 从 们 数据 存储 工作 更 加 简单 易 行 的 最 佳 保障 ， 设 计 优 
秀 的 存储 解决 方案 ， 不 仅 可 以 使 仓储 系统 实际 部 署 的 时 候 更 简单 容易 ， 更 可 以 降低 客户 的 
总 体 拥有 成 本 (TCO) ，* 使 客户 的 投资 能 得 到 良好 的 保护 。 
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存储 阵列 在 存储 系统 架构 中 位 置 


工人 43 4h 4h A 41 43h 4 


存储 阵列 


服务 器 M 


交换 机 
存储 阵列 


存储 阵列 ”存储 阵列 存储 阵列 
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在 存储 系统 架构 中 ， 磁 盘 阵 列 做 为 数据 存储 设备 ， 为 用 户 业 务 系统 提供 数据 存储 服务 。 
存储 阵列 设备 成 为 用 户 数据 业务 稳定 、 可 靠 、 高 效 运行 的 重要 因素 。 
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存储 阵列 系统 硬件 组 成 


。 控制 杠 
= 控制 框 用 于 处 理 各 种 存储 业务 ， 并 管理 级 联 在 控制 框 下 面 的 硬盘 框 。 
。 硬盘 框 
。 硬盘 框 主要 用 于 容纳 各 种 硬盘 ， 为 应 用 服务 器 提供 充足 的 存储 空间 。 。 
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存储 阵列 系统 主要 由 控制 框 和 硬盘 框 两 部 分 组 成 ， 为 客户 提供 一 个 高 可 靠 、 高 性 能 、 
大 容量 的 智能 化 存储 系统 。 

华为 1 系列 存储 阵列 产品 包括 : S2200TYS2600T/S5500T/S5600T/S5800T/S6800T， 其 
中 32200T/32600T/35500T 为 2U 盘 控 一 体 化 架构 ，35600T/35800T/36800T 为 4U 盘 控 分 离 架 
构 。 本 课程 内 容 将 以 32600T/S5500T/35600T 为 例 ， 重 点 介绍 盘 控 一 体 和 盘 控 分 离 两 种 硬件 
形态 的 硬件 组 成 和 软件 架构 。 
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S2600T 控 制 框 前 面板 


3.5inch 硬 盘 插 框 

。 12xX3.5inch 硬 盘 。 

。 支持 主流 SAS、SATA、5SD 盘 。 

。 前 四 个 盘 为 保险 箱 盘 ， 2* (1+1) The 
。 每 个 硬盘 可 独立 上 下 电 。 
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S2600T 控 制 框 采用 部 件 模 块 化 设计 ， 主 要 由 系统 插 框 、 控 制 器 模块 、 风 扇 -BBU 模 块 、 
电源 模块 和 硬盘 模块 组 成 。 控 制 框 可 使 用 交流 电源 模块 或 直流 电源 模块 进行 供电 。 
12 盘 位 控制 框 硬盘 横 位 从 左 到 右 ， 要 从 和 由 到 下 ， 按 0~11 进 行 编 号 ， 保 险 箱 盘 位 于 0~3 
E. 
。 保险 箱 盘 : 对 于 盘 控 一 体 的 控制 框 # 存储 系统 中 控制 框 的 前 4 个 硬盘 规划 为 保险 箱 盘 ; 
。 保险 箱 盘 用 于 存放 系统 重要 数据 ， 以 及 在 电源 模块 故障 时 保存 Cache 中 的 数据 ; 
。 每 一 块 保险 箱 盘 上 用 于 存放 系统 重要 数据 的 容量 为 23 GB，4 块 保险 箱 盘 共 占 用 92 GB 的 
FE; 


。 A 控 2 块 保险 箱 盘 ，B 控 两 块 保险 箱 盘 ， 分 别 为 1+1 备 份 。 
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S2600T 控 制 框 后 面板 














J 
aX 


盘 控 一 体 控制 模块 风扇 /BBU 模 块 电源 模块 

。 主流 桌面 CPU 平台 。 。 风 扇 3+1 宛 余 。 NRA 

。 提供 管理 网 口 、 调 试 网 口 和 串口 。 + 智能 精细 化 调 速 。 &_ 转 换 效率 最 高 达 
。 板 载 2 个 6Gb SAs 接 口 。 。 内 置 BBU， 支 持 掉 电 数 据 保 92% 

。 支 持 1 个 接口 模块 。 护 ，2+0。 

。 板 载 4 个 GE 接口 。 
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控制 器 模块 是 控制 框 中 的 核心 部 件 ， 主 要 负责 处 理 存 储 业 务 、 接 收 用 户 的 配置 管理 命 
令 并 保存 配置 信息 、 接 入 硬盘 管理 。 


BBU 模 块 能 够 在 系统 外 部 供电 失效 的 情况 下 ， 提 供 后 备 电源 支持 ， 以 保证 存储 系统 中 
业务 数据 的 安全 性 。 在 系统 电源 输出 正常 时 BBU 处 于 备份 状态 ， 当 外 部 电源 断 开 时 ，BBU 
能 够 继续 给 存储 系统 供电 一 段 时 间 ， 使 存储 系统 能 够 将 Cache 中 的 数据 同步 到 保险 箱 盘 
中 ， 和 避免 业务 数据 的 丢失 。BBW 支 持 失 效 隔 离 ， 当 BBU 发 生 故 障 时 不 会 影响 系统 的 正常 运 
行 。 

设备 操作 注意 事项 : 

。 系统 正在 走 下 电流 程 不 允许 揪 拔 控制 盒 或 者 BBU ; 
。 10s 内 不 可 对 同一 模 位 更 换 硬 盘 ; 

。 10s 内 不 可 互 换 SAs 级 联 线 ; 

。 升级 一 个 BBU 时 不 能 插 拔 另 一 个 BBU ; 


。 单 电源 供电 ， 在 插入 另 一 个 电源 5 秒 之 内 不 允许 拔 出 另 一 个 正在 供电 的 电源 或 者 该 电源 
的 电源 线 。 
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S2600T 探 制 框 一 一 接口 











sanannnnme 
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mini SAS 级 联 端 口 





8Gb FC 主 机 端口 


1Gb iSCSI Elie 
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。 控制 器 通常 包括 以 下 接口 : 
o 管理 和 维护 网 口 
= 管理 模块 为 存储 系统 提供 管理 接口 ， 主 要 包括 管理 网 口 、 维 护 网 口 和 串口 。 
" 管理 模块 将 系统 配置 数据 对 告警 信息 以 及 日 志 信 息 保存 到 保险 箱 硬盘 上 。 
o 主机 MO 端口 
= IO 接口 模块 主要 用 于 存储 设备 与 应 用 服务 器 之 间 的 连接 


" 存储 设备 支持 的 MO 接口 模块 包括 FC 接 口 模块 、TOE 接 口 模块 、iSCs3I 接 口 模块 
及 FCoE 接 口 模块 。 


o 硬盘 框 级 联 端口 


" 级 联 模块 通过 级 联 端口 连接 控制 框 和 硬盘 框 ， 是 控制 框 和 硬盘 框 之 间 进 行 数据 
传输 的 连接 点 。 


目前 存储 系统 通常 使 用 双 控 制 器 ， 当 一 个 控制 器 出 现 故 障 时 ， 存 储 系统 仍 能 够 为 业务 
系统 提供 数据 存储 服务 。 


S2600T 控 制 框 支持 1Gb iSCSI 10Gb TOE 和 8Gpb FC 主 机 接口 模块 ，32200T 只 支持 
8GeFC 主 机 接口 模块 。 


0 


147 0 


S5500T 探 制 框 一 一 前 面板 


2.5inch 硬 盘 插 框 

。 24X2.5inch 硬 盘 。 

。 支持 主流 SAS、NL-SAS、 
55D 盘 。 

。 前 四 个 盘 为 保险 箱 
2* (1+1) TA? 

。 每 个 硬盘 可 独立 在 平 电 。 


3.5inch 硬 辩 插 杠 

。 12Xx3.5inBh 硬 盘 。 

。 支持 主流 SAS、NL-SAS、 
SSD- 

e 前 网 个 盘 为 保险 箱 盘 ， 
À (1+1) Te 

。 每 个 硬盘 可 独立 上 下 电 。 
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35500T 存 储 系统 主要 由 控制 框 、 硬 盘 框 和 文件 引擎 组 成 。 通 过 控制 框 、 硬 盘 框 和 文件 
引擎 互联 ， 可 为 客户 提供 一 个 高 可 靠 、 高 性 能 s 大 容量 的 智能 化 存储 系统 ， 使 存储 系统 实 
现 性 能 监控 、 故 障 告警 等 功能 。 

控制 框 采 用 部 件 模块 化 设计 ， 主 要 由 系统 插 框 、 控 制 器 模块 、 风 扇 -BBU 模 块 、 电 源 模 
块 和 硬盘 模块 组 成 。 

控制 框 为 2U， 分 为 24 盘 位 控制 框 和 12 盘 位 控制 框 。 24 盘 位 控制 框 硬盘 权 位 从 左 到 右 
按 0~23 进 行 编号 ,保险 箱 盘 位 于 0~3 号 槽 位 ， 12 盘 位 控制 框 硬盘 槽 位 从 左 到 右 ， 再 从 上 
到 下 ， 按 0~11 进 行 编号 ， 保 险 箱 盘 位 于 0~3 号 槽 位 。 

控制 框 可 使 用 交流 电源 模块 或 直流 电源 模块 进行 供电 。 


0 1481 


S5500T 探 制 框 一 一 后 面板 


盘 控 一 体 控制 模块 风扇 /BBU 模 块 

。 主流 桌面 CPU 平台 。 。 风扇 3+1 宛 余 。 

。 提供 管理 网 口 、 调 试 网 口 和 串口 。 。 智能 精细 化 调 速 。 

。 板 载 2 个 6Gb SAS 接 口 。 。 内置 BBU， 支 持 掉 电 数 
。 支持 1 个 接口 模块 。 据 保护 ，1+1 宛 余 

。 板 载 4 个 8G FC 接口 。 
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S5500T 控 制 框 支持 1Gb iSCSIS 10GbIOE< 0Gb FCoE 和 8Gb FC 接口 模块 。 


o0 149f 


S5500T 控 制 框 接口 


mini SAS 级 联 端口 
8Gb Fcfa 


8Gb FE 主机 端口 
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管理 模块 为 存储 系统 提供 管理 接口 ， 主 要 包括 管理 网 口 、 维 护 网 口 和 串口 。 管 理 模 块 
将 系统 配置 数据 、 告 警 信息 以 及 日 志 信息 保存 到 保险 箱 硬盘 上 。 


MO 接口 模块 主要 用 于 存储 设备 与 应 用 服务 器 之 间 的 连接 ， 目 前 华为 存储 设备 支持 的 
IO 接口 模块 包括 8Gpb FC 接口 模块 、s10Glb TOFE 接 口 模块 、1Gb iSCSI 接口 模块 以 及 10Gpb 
FCoE 接 口 模块 。 


级 联 模块 通过 级 联 端口 连接 控制 框 和 硬盘 框 ， 是 控制 框 和 硬盘 框 之 间 进 行 数据 传输 的 
连接 点 。 SA5 级 联 模块 提供 2 个 传输 速率 为 6Gbit/s 的 mini SAS 级 联 端口 ， 用 于 级 联 硬盘 框 。 
控制 框 的 ?AS 级 联 模块 通过 mini 3AS 电 缆 与 存储 系统 的 后 端 硬盘 阵列 连接 。 当 连接 的 设备 
传输 速率 低 于 级 联 端 所 速率 时 ， 级 联 端口 将 自动 适应 传输 速率 ， 以 保证 数据 传输 通道 的 连 
通 性 和 数据 传输 速率 的 二 致 性 。 





0 100 


S56/58/6800T 控制 框 一 一 前 面板 


控制 模块 

。 双 控 制 器 

。 主流 服务 器 平台 

。 自动 变频 ， 降 低能 耗 
。 提供 系统 下 电 按钮 


BBU 模 块 

. Allil) NR 

AFD R 
电 你 护 
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S$5600T/5800T/6800T 为 4U 控 制 框 ， 主 要 由 控制 器 模块 、BBU 模 块 、 电 源 模块 、 风 扇 模 
块 以 及 多 个 接口 模块 组 成 ， 是 存储 系统 的 核心 部 件 。 


控制 框 可 使 用 交流 电源 模块 或 直流 电源 模块 进行 供电 。 


0 13510 


S56/58/6800T 控制 框 后 面板 


风扇 模块 

。 风扇 5+1 宛 余 

。 散热 功 耗 小 

。 智能 精细 化 调 速 


电源 模块 
。2* (IR TER 
。 转换 效率 高 达 92 允 





。 12 个 接口 模块 槽 位 。1+1 宛 余 
。 最 大 支持 1440 盘 。 支持 热 插 拔 
。 接口 模块 支持 热 揪 拔 。 内 置 高 可 靠 33D 作 为 系统 保险 
。 接 口 类 型 丰富 : 8G FC、4G FC、 箱 
6G SAS、GE、10GE 
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H FSS5600T/S5800T/S6800T ER RTE Re RHEEN. A Ea 
Cache 脏 数据 刷 入 硬盘 中 ， 那 就 必须 要 同时 对 控制 框 以 及 硬盘 框 中 的 硬盘 进行 供电 ， 这 
就 意味 着 硬盘 框 也 需要 一 个 专门 的 UPS% 因此 ，S5600T/36800[T 在 控制 器 中 内 置 一 块 3SD， 
掉 电 后 Cache 脏 数据 会 写 入 这 块 5SD 盘 申 ， 控 制 框 的 内 置 BBU 可 以 对 内 置 55D 供 电 。 而 系 
统 配 置 数据 、 系 统 日 志 等 信息 仍然 保存 在 硬盘 框 的 前 4 块 硬盘 中 ， 但 这 部 分 数据 是 不 需要 
进行 掉 电 保护 的 。 


0 120 


S56/58/6800T 控制 框 一 一 接口 


EE EEE CE OT EX 72 


RATÉ 


管理 网 口 4 ”8Gb FC 主机 端 问 
维护 网 口 5 ”1GbisCs( 主 机 端口 
串口 6  mimiSASREKEN 
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管理 模块 为 存储 系统 提供 管理 接口 ， 主 要 包括 管理 网 口 、 维 护 网 口 和 串口 。 管 理 模 块 
将 系统 配置 数据 、 告 警 信息 以 及 日 志 信息 保存 到 保险 箱 硬 盘 上 。 

IO 接口 模块 主要 用 于 存储 设备 与 应 用 服务 器 之 间 的 连接 ， 存 储 设备 支持 的 MO 接口 模 
块 包括 8Gb FC 接口 模块 、10Gb TOFE 接 同 模块 、1Gb iSCSI 接 口 模块 以 及 10Gb FCoE 接 
口 模块 。 

级 联 模块 通过 级 联 端口 连接 控制 框 和 硬盘 框 ， 是 控制 框 和 硬盘 框 之 间 进 行 数据 传输 的 
连接 点 。 SA5 级 联 模块 提供 2 个 传输 速率 为 6Gbit/s 的 mini SAS 级 联 端 口 ， 用 于 级 联 硬 盘 框 
。 控 制 框 的 AS 级 联 模块 通过 mini 3As 电 缆 与 存储 系统 的 后 端 硬盘 阵列 连接 。 当 连接 的 设 
备 传输 速率 低 于 级 联 端 同 速率 时 ， 级 联 端口 将 自动 适应 传输 速率 ， 以 保证 数据 传输 通道 的 
连通 性 和 数据 传输 速率 的 一 致 性 。 





0 1530 





存储 阵列 的 硬盘 框 


。 系统 插 框 
电源 模块 
风扇 模块 
级 联 模块 
硬盘 模块 


| 1 | aame JR | 电源 模块 | 
| 3 | 风 房 模块 司 “4 | 级 联 模块 | 
| 5 | esma | | | 


D. 
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硬盘 框 由 系统 插 框 、 级 联 模块 、 硬 盘 模块 、 电 源 模块 以 及 风扇 模块 等 组 成 ， 是 存储 空 


间 的 载体 。 


。 2U SAS 硬 盘 框 后 视图 








| 1 | 电源 模块 拉手 | 2 | 电源 模块 |3| sanns | 
| 4 | mem | 5 | 级 联 模块 拉手 | 6 | Ram | 
7| n |8 | minisAs 级 联 并 | 9 | À Wine | 
weaas | | | “A” | 
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硬盘 框 由 系统 插 杠 、 级 联 模块 、 硬 盘 模 块 、 电 源 模块 以 及 风扇 模块 组 成 ， 是 存储 空间 
的 载体 。 


2U 3As 硬 盘 框 可 满 配 24 块 2.5 英 寸 硬盘 同时 可 使 用 交流 电源 模块 或 直流 电源 模块 进 
行 供电 ， 用 户 可 以 根据 应 用 环境 选择 相应 的 电源 模块 。 


0 150 


T 系 列 存储 硬盘 框 一 一 4U SAS 硬 盘 框 


。 4U SAS 硬 盘 框 后 视图 


1 2 345 6 

















| 1 | 电源 模块 拉手 | 2 | 电源 模块 |3| émis | 
| 4 | 风 房 模块 | 5 | 级 联 模块 拉手 | 6 Lutte | 
[7| n | 8 | minisAS 级 联 端口 | 9 4 EE | 
| 10 | pms |u| eaeorza TA | ”| 
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AU SAS 硬 盘 框 可 满 配 24 块 3.5 英 寸 硬盘 ， 可 使 用 交流 电源 模块 或 直流 电源 模块 进行 供 
电 ， 用 户 可 以 根据 应 用 环境 选择 相应 的 电源 模块 。 


0 1560 


T 系 列 存储 阵列 软件 染 构 


SAN 应 用 主机 端 软件 管理 客户 端 软件 


HostA UltraAPM Console ISM 
ORASAN UitraAPM Agent ie 


UltraPath [Her 
SAN 主 机 操 


Maintain Tools 


sl 
”一 | 存储 单 元 端 软件 | FC/ISCSI 通 


Eme 
基本 功能 控制 软件 ii 
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存储 系统 提供 丰富 的 全 套 存储 管理 软件 ， 方 便 您 轻松 快捷 地 管理 和 维护 存储 系统 。 存 
储 系统 软件 由 文件 引擎 端 软件 、 存 储 单元 端 软件 、SAN 应 用 主机 端 软件 和 管理 客户 端 软件 
4 部 分 组 成 。 


。 文件 引擎 端 软件 
通过 文件 系统 卷 管理 、 文 件 系统 快照 等 模块 以 卷 的 方式 将 硬盘 或 虚拟 的 LUN 进 行 虚拟 


化 管理 以 及 基于 文件 系统 的 快照 等 功能 。 这 部 分 内 容 将 在 其 他 高 级 课程 中 介绍 ， 本 课程 不 
做 深入 介绍 。 


。 存储 控制 软件 

实现 主机 与 存储 系统 的 通信 和 数据 交互 ， 实 现存 储 系统 的 硬件 监控 、 存 储 系统 基本 功 
能 、 增 值 功能 的 管理 和 配置 。 每 一 项 功能 的 具体 内 容 将 在 后 面 章节 中 介绍 。 
。 SAN 应 用 主机 端 软件 

通过 UltraPath 实 现 应 用 服务 器 到 存储 设备 之 间 的 路 径 选 择 。UltraAPM 为 应 用 系统 提 
供 数 据 一 致 性 保障 ， 并 提供 针对 应 用 服务 器 、 应 用 系统 、 存 储 系统 进行 数据 保护 与 容 灾 任 
务 的 配置 管理 、 上 监控 等 工作 。 


。/ISM 管 理 客户 端 软 件 : 


a ISM agent 集 成 在 存储 控制 软件 中 ， 是 部 署 在 存储 设备 上 的 ISM 通 信 接 口 ， 实 现 数 据 
收集 


/ ISM client 部 署 在 管理 客户 端 ， 用 于 对 存储 系统 进行 配置 、 管 理 和 监控 
o ISM server 是 实现 ISM 内 部 逻辑 处 理 、 数 据 组 织 和 协议 组 装 解析 等 。 


0 1570 


0 158 [ 


© 目录 


4 t Gil Z LÀ 26 gne 
FF TA PE SU RAA 


nd DA 


. 华为 存储 阵列 


NE Eil + 
阵列 基 
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存储 阵列 技术 


n RNR (多 控 ) = Scale-out a 块 虚拟 化 技术 = SmartTier 技 术 
a 硬盘 坏 道 检 测 /修复 a iSCSI = Calche 回 写 = SmoalrtQos 技 
n 磁盘 健康 分 析 m FC 技术 = Cache 预 取 技 术 = SmartThin 

n 多 路 径 技术 m SA3 技 术 m 12GDSAS 


m BBU 掉 电 保护 = PCIe m 16Gb FC 
= RAID 重 构 = FCOE © 
a 缓存 镜像 技术 S 

> 


a 磁盘 保险 箱 技术 


a 磁盘 预 拷贝 技术 
a 快照 /克隆 技术 


m LUNN 
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ê 
none nus ane a 展 性 、 高 性 能 、 高 可 用 性 ， 开 发 和 使 
用 了 相应 的 技术 ， DCR + 绍 ， 在 后 续 的 存储 课程 中 ， 还 将 进行 详细 


介绍 。 \ 
& 
Q 


S 
N 
Q 
Q 
N 
Q 
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存储 阵列 器 件 元 余 


控制 器 模块 元 余 
BBU 模 块 元 余 


xX 


风扇 模块 元 余 
接口 模块 元 余 


电源 模块 元 余 
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FRPIRARIOT HIER SUR, Bulak, EDR ARE ERR 
等 部 件 的 宛 余 ， 存 储 系统 的 可 靠 性 得 到 保障 下 同时 ， 因 为 采用 双 控 双 活 技术 ， 大 大 提升 了 
存储 系统 的 数据 存 取 效 率 。 


0 1601 


存储 阵列 的 多 控 技 术 


。 双 控 制 器 系统 的 工作 模式 : 
o 主 备 模式 
o 双 活 模式 















































p 
电源 一 风 南 模块 B | 
基业 务 数据 流 


-< 2 î 
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。 在 双 控制 器 系统 中 ， 有 以 下 两 类 典型 的 工作 模式 ; 


o Active-Passive 工 作 模式 : 又 被 称 为 主 备 模式 ， 即 任何 时 刻 两 个 控制 器 中 只 有 一 
个 控制 器 处 于 激活 状态 ， 作 为 主 控制 器 ， 用 于 处 理应 用 服务 器 的 MO 请 求 ， 而 另外 
一 个 控制 器 处 于 空闲 状态 ， 作 为 备用 控制 器 ， 以 便 在 主 控制 器 出 现 故 障 或 者 处 于 
离线 状态 时 及 时 接管 其 工作 。 


a Active-Active 工 作 模 让 % 常 被 称 为 双 活 模式 ， 顾名思义 即 两 个 控制 器 都 处 于 激活 
状态 ， 可 并 行 处 理 来 外 应 用 服务 器 的 |/O 请 求 ， 一 旦 某 个 控制 器 出 现 故 障 或 离线 ， 
另 一 个 控制 器 将 及 时 接管 其 工作 ， 且 不 影响 自己 现 有 的 任务 。 可 见 ， 这 种 工作 模 
式 通过 互 为 兄妹 备份 来 确保 系统 高 可 靠 性 的 同时 ， 它 还 具有 均衡 业务 量 、 充 分 利 
用 资源 ， 提 逢 系统 性 能 等 诸多 优点 。 


o0 1610 


硬盘 坏 道 检 测 技术 


。 读 写 失败 有 多 重 原因 

。 根据 系统 当前 状态 、 硬 盘 当 前 
状态 、IO 失 败 信息 等 进行 综 会 
分 析 





硬盘 介质 目 动 扫 拍 
。 直接 使 用 硬盘 的 肉 建 介质 扫描 
面 对 磁 盘 坏 道 ， 被 动 应 对 还 | 功能 
、 。 避免 了 硬盘 招 撒 对 后 端 带宽 的 
是 主动 出 击 ? 占用 
。 将 对 系统 性 能 的 影响 降 到 最 低 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 24 w HUAWEI 





据 统 计 ，SATA 硬 盘 年 故障 率 约 为 2.5 有 多， 其 中 70% 为 可 修复 坏 道 。 以 30 天 为 周期 对 硬 


盘 进 行 周期 性 扫描 ， 就 意味 着 硬盘 坏 道 每 30 关 被 全 部 发 现 并 修复 一 次 。 由 此 ， 可 以 计算 出 
实现 硬盘 介质 扫描 技术 之 后 ， 硬 盘 年 故障 尝 可 降低 到 和 =2.5%X0.3+2.5%X0.7X30/365= 
0.89 多 ，Roid 组 失效 率 可 以 降低 约 1 个 数量 级 。 
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可 以 通过 两 种 途径 来 检测 硬盘 坏 道 。 


读 写 失 败 自 动 分 析 。 硬 盘 读 与 失败 可 能 有 多 种 原因 ， 如 硬盘 磁头 损坏 、 硬 盘 接口 损坏 、 
连接 线 缆 损 坏 、 硬 盘 被 拔 出 等 6 当 硬 盘 读 写 失败 发 生 时 ， 存 储 系统 会 根据 系统 当前 状态 
、 硬 盘 当前 状态 、IO 失 败 信息 等 进行 综合 分 析 ， 判 断 该 次 读 写 失败 原因 是 否 为 硬盘 坏 
道 。 


硬盘 介质 主动 扫描 。 存 储 系统 还 支持 硬盘 介质 后 台 扫 描 技 术 ， 利 用 硬盘 空闲 周期 检查 硬 
盘 介 质 ， 及 时 发 现 硬盘 坏 道 ， 避 免 累 积 错误 。 存 储 系统 的 硬盘 介质 扫 朱 ， 近 奔 了 顺序 读 
取 硬 盘 所 有 扇 区 的 传统 方式 ， 直 接 使 用 硬盘 的 内 建 介质 扫描 功能 ， 避 免 了 硬盘 扫描 对 后 
端 带宽 的 占用 Ss, 将 对 系统 性 能 的 影响 降 到 最 低 。 当 对 正在 进行 介质 扫 摘 的 硬盘 进行 读 写 
时 ， 和 扫描 动作 自动 停止 ， 转 而 处 理 读 写 操作 ， 在 读 写 停 止 之 后 ， 硬 盘 可 以 从 之 前 的 断 点 
PRET 





磁盘 坏 道 修复 技术 


。 Roid 5 坏 道 修复 示意 图 (红色 色 表 示 坏 道 ) 


读 
读 





LL 
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一 直 以 来 ， 硬 盘 都 是 计算 机 系统 中 最 主要 的 存储 设备 ， 同 时 也 是 计算 机 系统 中 最 容易 
出 故障 的 部 件 。 众 所 周知 ， 常 见 的 硬盘 都 是 采用 磁 介 质 来 进行 数据 的 存储 ， 满 足 计算 机 系 
统 ID 处 理 的 需要 。 硬 盘 的 货 量 大 大 增加 ， 同时 也 意味 着 硬盘 报废 的 数量 大 大 增加 。 存 储 
系统 支持 硬盘 坏 道 智能 修复 技术 ， 通 过 该 技术 能 够 对 硬盘 坏 道 进行 智能 修复 ， 使 硬盘 恢复 
健康 ， 有 效 延长 硬盘 寿命 ， 从 而 减少 硬盘 报废 数量 ， 降 低 客户 TCO。 


存储 系统 的 修复 策略 如 下 : 


。 如 果 发 现 坏 道 的 硬盘 为 空闲 盘 或 空闲 热 备 盘 ， 则 直接 使 用 全 零 数 据 对 坏 道 地 址 进行 覆盖 
写 操作 ， 以 触发 硬盘 的 坏 道 地 址 重 映射 操作 ， 完 成 硬盘 坏 道 修 复 。 


如 果 发 现 坏 道 的 硬盘 为 RAID 组 成 员 盘 或 已 用 热 备 盘 ， 则 不 能 使 用 全 零 数 据 对 坏 道 进行 
覆盖 写 ， 因 为 该 地 址 可 能 已 包含 有 效 的 用 户 数据 ， 此 时 需要 先 恢复 出 该 地 址 的 正确 数据 
， 然 后 使 用 恢复 出 的 正确 数据 重 写 该 坏 道 地 址 ， 完 成 坏 道 修复 。 


。 在 使 用 上 述 策略 2 的 情况 下 ， 需 要 通过 RAID 组 的 宛 余 来 恢复 重 写 坏 道 地 址 所 需 正 确 数据 
(RAIDO 无 匈 余 ， 无 法 进行 恢复 ) 。 只 要 RAID5 中 没有 两 个 盘 同 一 地 址 坏 道 ，RAID10 
镜像 组 中 的 互 为 镜像 的 两 个 盘 没 有 同一 地 址 坏 道 ，RAID6 没 有 三 个 盘 同一 地 址 坏 道 ， 存 
储 系统 都 可 以 对 坏 道 进 行 成 功 修复 。 
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磁盘 健康 分 析 DHA 


DHA (Disk Health Analyzer) 

系统 包括 
o 硬盘 信息 采集 模块 : 
o 分 析 模 块 

o CallHome 模 块 

o 数据 预 处 理 

o 硬盘 信息 数据 库 

o 数据 分 析 
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DHA (Disk Health Analyzer) 系统 的 主要 目的 是 采集 网 上 硬盘 的 运行 状态 信息 ， 并 将 
言 息 回 传 至 服务 中 心 ， 以 建立 硬盘 信息 数据 库 $ 及 硬盘 健康 度 分 析 模 型 ， 通 过 该 模型 对 现 
网 硬盘 的 健康 状况 进行 诊断 。 


。 实现 过 程 及 原理 


o 阵列 控制 器 中 集成 了 PHA 系 统 的 信息 采集 模块 ， 硬 盘 信 息 由 该 模块 收集 后 上 传 给 
ISM 


o ISM 中 集成 了 DHA 系 统 的 分 析 模 块 ， 用 于 分 析 收 集 到 的 硬盘 信息 并 作出 诊断 ， 并 
通过 Call Home 功 能 ;将 这 些 信 息 通 过 网 络 上 传 给 HW 服务 中 心 。 


o DHA 系 统 的 功能 可 通过 ISM 中 的 开关 手动 打开 或 关闭 。 
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多 路 径 技 术 


SAN 交 换 机 à 


存储 阵列 Eca 
== 
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用 户 数据 从 主机 侧 到 磁盘 阵列 ， 经 历 的 典型 路 径 为 : 主机 -> SAN 网 络 -> 存储 系统 机 
头 -> 存储 系统 磁盘 。 


所 谓 多 路 径 技术 ， 即 在 一 台 主 机 和 存储 阵列 端 使 用 多 条 路 径 连 接 ， 使 主机 到 阵列 的 可 
见 路 径 大 于 一 条 ， 其 间 可 以 跨 过 多 个 交换 机 ， 避 免 在 交换 机 处 形成 单 点 故障 。 如 上 右 图 中 
， 主 机 到 存储 阵列 的 可 见 路 径 有 2 条 ， 即 (1, 3) (2, 4) ， 该 路 径 上 有 两 台独 立 的 交换 
机 。 在 这 种 模式 下 ， 当 路 径 1 断 开 时 , 数据 流 会 在 主机 多 路 径 软 件 的 导 引 下 选择 路 径 (2, 
4 ) 到 达 存 储 阵列 侧 ， 同 样 在 左 侧 交换 机 失效 时 ， 也 会 自动 导 引 到 右 侧 交换 机 到 达 存 储 阵 
列 。 在 路 径 1 恢复 的 情况 下 ,IO 流 会 自动 切 回 原 有 路 径 下 发 。 整 个 切换 和 恢复 过 程 对 主机 
应 用 透明 ， 完 全 避免 了 由 于 主机 和 阵列 间 的 路 径 故障 导致 DO 中断 。 

存储 系统 见 余 保护 方案 涉及 了 这 个 路 径 上 的 所 有 领域 ， 在 主机 侧 和 SAN 网 络 领 域 ， 通 
过 结合 UltraPoafhm 多 路径 软件 及 其 它 多 路 径 软件 ， 保 证 了 前 端 路 径 没有 单 点 故障 ; 在 存储 
机 头 侧 ， 使 用 了 全 元 余 硬 件 及 热 播 拔 技术 实现 了 双 控 双 活 的 宛 余 保护 ; 在 磁盘 侧 ， 利 用 磁 
盘 双 端口 技术 及 磁盘 多 路 径 技术 ， 实 现 了 磁盘 侧 见 余 保 护 。 
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多 路 径 技术 原理 


未 安装 多 路 径 安装 了 多 路 径 


J 主机 看 到 两 个 物 a 
理 LUN 主机 只 看 到 一 个 
LUN K 





W Huawei 
。 多 路 径 软件 的 作用 : 


o 避免 了 同一 LUN 有 多 条 路 径 可 达 导 致 的 操作 系统 逻辑 错误 
o 增强 了 链 路 的 可 靠 性 ， 避 免 了 因为 单个 链 路 故障 而 导致 的 系统 故障 
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Cache 镜 像 技 术 


。 两 个 控制 器 的 写 Cache 数 据 通过 相互 镜像 实现 备份 ， 确 保 数 据 的 安 
全 和 完整 ， 提 高 了 系统 的 可 靠 性 。 


控制 器 A 
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Cache 即 高 速 缓存 ， 是 存储 系统 中 用 于 缓存 主机 数据 ， 提 高 阵列 性 能 及 可 靠 性 的 部 件 
。Cache 主 要 用 来 缓存 主机 数据 ， 使 主机 在 进行 数据 读 写 时 不 用 每 次 都 对 硬盘 进行 操作 
， 从 而 提高 系统 的 读 写 性 能 。 同 时 存储 阵列 通常 使 用 双 主 控 ， 且 采用 双 控 双 活 技术 ， 双 控 
制 器 都 存在 相同 大 小 相同 规格 的 Cache， 使 得 数据 在 本 端 控制 器 Cache 和 对 端 控制 器 
Coache 都 有 缓存 ， 即 两 个 控制 器 的 写 Cache 数 据 通过 相互 镜像 实现 备份 ， 确 保 数据 的 安 
全 和 完整 ， 提 高 了 系统 的 可 靠 性 s 
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Cache 镜 像 技 术 实 现 


。 镜像 通道 
o SAS 





镜像 通道 


a PCI-E 
a FC 
。 实现 机 制 


o Cache 








ECache 
镜像 Cache 
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Cache 镜 像 技术 是 通过 镜像 通道 实现 的 。 可 采用 3A3、PCI-E 或 FC 作 为 镜像 通道 。 由 
于 在 物理 上 采用 了 两 条 镜像 通道 ， 使 系统 在 可 靠 性 上 得 到 了 进一步 的 提升 ， 即 使 其 中 一 条 
通道 出 现 故障 也 不 会 影响 业务 ， 保 证 业务 的 连续 性 。 


。 实现 机 制 |: 


o 读 Cache: 作用 为 缓存 读数 据 ; 在 有 主机 读 请 求 下 发 时 ，Cache 会 先 将 磁盘 中 
数据 读 到 内 存 中 ， 并 启动 预 取 ， 根 据 数据 的 连续 性 将 磁盘 中 后 续 可 能 会 被 主机 读 
到 的 数据 预 取 到 Cache 中 ， 增 加 后 续 主 机 请 求 的 读 命中 概率 。 


o 写 Cache: 作用 为 缓存 写 数据 ， 在 有 主机 写 请 求 下 发 时 ，Cache 会 先 将 数据 写 
到 内 存 的 固定 区 域 中 ， 并 返回 给 主机 写 完 成 ， 后 续 Cache 会 将 这 部 分 数据 整合 后 
统一 写 到 硬盘 中 s,/ 借 此 提高 主机 写 的 效率 。 


o 镜像 Cache:> 作 用 为 缓存 写 数据 并 在 对 端 控 制 器 Cache 保 存 这 部 分 数据 的 镜像 
， 在 有 主机 镜像 写 请 求 下 发 时 ，Cache 会 将 这 部 分 数据 分 别 写 到 本 端 控制 器 的 内 
存 及 对 端 控制 器 的 内 存 ， 保 证 两 端 数据 的 一 致 性 。 实 际 上 ， 本 端的 镜像 Cache 就 
是 对 靖 写 Cache 的 镜像 ， 是 对 端 瑟 Cache 的 备份 。 这 样 的 结构 充分 保证 了 系统 
的 高 可 用 性 。 
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数据 保险 箱 技 术 


。 数据 保险 箱 技术 用 于 保存 Cache 数 据 ， 避 免 因 系统 意外 断 电 时 数据 丢失 。 


。 内 置 BBU 电 池 可 保证 在 系统 意外 断 电 时 ， 对 Cache 和 系统 保险 箱 硬 盘 同 时 
供电 ， 让 Cache 中 的 数据 写 到 数据 保险 箱 中 ， 实 现 Cache 数 据 永久 保存 。 
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数据 保险 箱 由 控制 框 前 4 块 盘 的 最 后 部 分 空间 组 成 。 保 险 箱 硬盘 空间 之 间 使 用 RAID10 
保护 ， 每 块 盘 除 系统 占用 的 最 后 部 分 空间 外 , 涤 余 的 绝 大 部 分 空间 均 可 分 配给 用 户 做 正常 
的 数据 存储 使 用 。 
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硬盘 预 拷 贝 技术 


正常 状态 时 ， 实 时 监 
“0 
数据 盘 AER 


当 茶 个 硬盘 出 现 疑 
似 故 障 时 : 将 该 盘 


上 的 迁移 数据 到 热 jaag i. 
备 盘 


疑似 故障 盘 


迁移 完成 后 ， 用 新 
盘 蔡 换 掉 故障 盘 ， 


数据 会 Copy back 
o 到 新 更 换 的 硬盘 上 


热 备 盘 
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。 技术 原理 


o 系统 实时 从 硬盘 的 SMART 信息 中 读 取 人 硬盘 的 状态 信息 ， 当 发 现 硬盘 错误 统计 超过 
设 定 阀 值 后 ， 立 即 启 动 将 数据 从 疑似 故障 盘 中 迁移 至 AER, 同时 向 管理 人 员 告 
警 ， 提 醒 更 换 疑 似 故 障 盘 。 


。 技术 优势 
o 大 大 降低 重 构 事件 发 生 的 概率 
o 提高 系统 的 可 靠 性 
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磁盘 预 拷贝 技术 与 重 构 的 差异 


。 数据 重 构 的 影响 
o 系统 性 能 的 大 幅 降低 
o 大 量 数据 读 写 易 导致 硬盘 损坏 
o 会 导致 业务 中 断 


磁盘 预 拷贝 技术 示意 图 数据 重 构 技 术 示意 图 
IO 正常 ”硬盘 异常 事件 达到 设 定 值 IO 正常 ”硬盘 故障 


控制 器 r= mn À H 






































eI 








— \E = 下 
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硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 硬盘 
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磁盘 预 拷贝 技术 可 以 充分 利用 从 检测 到 即将 失效 到 磁盘 真正 失效 这 段 时 间 来 降低 风险 


， 与 数据 重 构 技术 相 比 ， 磁 盘 预 拷贝 技术 具备 以 下 优势 : 


ERE: 如 图 所 示 ， 整 个 预 拷 贝 过 程 中 ,NRAID 组 处 于 正常 状态 ， 所 有 成 员 盘 均 处 于 可 
用 状态 ，RAID 组 的 数据 匈 余 信息 是 完整 的 ， 客 户 数据 无 丢失 风险 。 而 在 重 构 过 程 中 ， 
RAID 组 处 于 降级 状态 ，RAID 组 的 数据 匈 余 信息 不 完整 (或 已 丢失 ) ， 客 户 数据 处 于 高 
风险 状态 。 

高 效率 : 如 图 所 示 ， 重 构 过 程 中 要 涉及 RAID 中 的 多 个 盘 ， 速 度 较 低 ， 而 且 占 用 后 端 带 
宽 也 较 大 。 而 磁盘 预 拷贝 技术 只 是 两 个 硬盘 之 间 的 数据 拷贝 ， 速 度 快 ， 占 用 资源 少 (M 
重 构 相 比 ) o 
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快照 技术 


快照 为 一 个 数据 对 象 产生 完全 可 用 的 副本 ， 它 包含 该 数据 对 象 在 某 一 时 间 
点 的 映像 。 

数据 对 象 : 对 存储 阵列 来 说 就 是 可 映射 给 主机 的 LUN。 

o 完全 可 用 : 可 以 正常 读 写 。 以 
o 时 间 点 : 数据 具有 一 致 性 。 
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快照 不 做 完整 的 物理 上 的 数据 拷贝 ， 而 是 通过 与 前 拷贝 技术 和 映射 表 得 到 源 数据 在 某 
一 时 间 点 的 数据 副本 。 


。 快照 的 目的 
o 快照 可 以 作为 备份 和 归档 的 数据 源 。 


o 快照 可 以 对 存储 设备 上 的 数据 灵活 且 频 繁 地 生成 多 个 时 间 点 的 数据 副本 ， 在 需要 
时 可 以 快速 地 恢复 数据 。 


。 快照 可 以 给 用 户 的 数据 备份 带 来 如 下 受益 : 
o 可 以 瞬间 生成 ， 不 影响 主机 业务 ， 得 到 源 LUN 在 某 个 时 间 点 的 数据 副本 。 


o 可 以 根据 用 户 自 定义 的 备份 策略 ， 对 存储 设备 上 的 数据 灵活 且 频 繁 地 生成 多 个 时 
间 点 的 数据 副本 ， 从 而 方便 快速 恢复 数据 。 
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LUN 拷 贝 技术 


。 EX: 一 种 基于 块 的 将 源 LUN 的 数据 复制 到 目标 LUN 的 技术 。 
。 应 用 : 通过 LUN 拷 贝 ， 实 现 分 级 存储 、 系 统 升 级 、 异 地 备份 等 应 用 需求 。 


xX 


四 拷贝 开始 FOP -~ 
(EEEE MMD MpDEAm — 





目标 LUN 
ORNER aey 


+ 





OceanStor 55000 OeeanStor 55000 
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。 LUN 拷 贝 特点 : 
o 将 数据 从 本 存储 系统 复制 到 一 个 或 多 个 其 他 存储 系统 。 
o 将 数据 从 一 个 或 多 个 其 他 存储 系统 复制 到 本 存储 系统 。 
o 将 数据 从 本 存储 系统 中 的 二 个 kUN 复 制 到 另 一 个 LUN。 
。 LUN 搁 贝 的 优势 : 
o 高 性 能 ，LUN 拷 贝 的 实现 过 程 比 基 于 主机 拷贝 的 实现 过 程 更 加 简洁 ， 因 此 LUN 拷 
贝 的 性 能 将 大 大 高 于 基于 主机 的 拷贝 。 
o 业务 无 天 性 5、LUN 搁 贝 的 执行 过 程 中 ， 不 需要 主机 参与 ， 不 会 占用 主机 的 资源 。 
主机 可 以 将 更 多 的 资源 用 于 处 理 生产 业务 。 
o 高 兼容 性 ，LUN 拷 贝 能 够 在 异 构 环 境 下 部 署 ， 支 持 不 同 品牌 存储 系统 间 的 LUN 找 
me 


。 LUN 拷 贝 文 持 全 量 和 增 量 两 种 拷贝 模式 。 
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远程 复制 (Hypermirror) 技术 


。 HyperMirror( 远 程 复 制 ) 提 供 不 同 区 域 间 数据 的 同步 /异步 镜像 
。 保护 用 户 数据 ， 避 免 灾 难 性 事件 带 来 的 损失 。 


司 X 
主 站 点 —p p 从 站 点 
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远程 复制 ， 是 数据 镜像 技术 的 一 种 ， 它 能 够 在 两 个 或 多 个 站 点 维护 若干 个 数据 副本 ， 利 
用 长 距离 来 避免 灾难 发 生 时 的 数据 丢失 。 
实现 远程 镜像 功能 的 技术 较 多 ， 业 内 使 用 最 为 广泛 的 主要 有 同步 远程 镜像 和 异步 远程 镜 
像 两 种 。 同 步 远程 复制 常用 于 距离 较 近 网 络 延 迟 比较 小 的 场景 中 。 异 步 远程 复制 常用 于 距 
离 较 远 网 络 延迟 稍微 大 的 场景 中 。 
。 远程 复制 技术 的 优势 
。 快速 业务 切换 
o 全 见 余 的 10 传输 路 径 
。 自动 恢复 策略 
o FC/IP 网 络 支持 
。 一 致 性 组 
。 MÉTIER 
0 复制 速率 动态 调整 
4、 全 面 的 管理 手段 
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LUN 找 贝 与 远程 复制 的 区 别 


只 能 在 同类 型 存储 系统 之 间 运 | 7ERTNERSAR 


行 。 储 系统 。 


每 个 主 LUN 只 能 向 1 个 (异步 

模式 ) 或 2 个 (同步 模式 ,分 | 每 个 源 LUN 可 以 向 数 坟 个 或 者 
别 位 于 不 同 存储 系统 上 ) 从 | 更 多 目标 LUN 复 制 数据 。 
LUN 复 制 数据 。 


用 于 持续 的 数据 保护 。 从 LUN | 用 于 数据 备份 。 数 据 拷贝 完成 
可 读 ， 但 始终 不 可 写 。 后 ， 主 机 即 可 访问 目标 LUN。 
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虽然 远程 复制 也 能 够 将 数据 从 本 存储 系统 复制 到 另 一 个 存储 系统 ， 但 是 在 具体 实现 方 
面 与 LUN 拷 贝 相 比 还 是 有 很 大 的 差异 。 


0 1350 


0 
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可 扩展 性 技术 


iSCSI 技术 
。 FC 技 术 
。 SAS 技 术 E> 


扩展 接口 协议 
SCSI RABE 只 适用 于 直 连 ， 扩 展 能 力 差 
iSCSI 组 网 方便 ,管理 简单 ， 不 受 距离 限制 数据 传 畏 效 率 低 ， 安 全 性 差 


吞吐 量 大 ， 可 靠 性 高 ， 低 时 灌 ， 安 全 性 高， > 


c 本 高 
性 价 比 高 ， 发 展 空间 大 ， 技 术 新 连接 距离 短 ， 只 适用 于 直 连 
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Scale out: 通过 一 定 的 分 布 式 算法 将 志 个 个 独立 的 低 成 本 存储 节点 组 成 一 个 大 而 强 的 
系统 ， 即 向 外 扩展 。 


SCSI (Small Computer System Inierface ， 小 型 计算 机 系统 接口 ) : 最 初 是 一 种 为 
小 型 机 研制 的 接口 技术 。 SCsl 成 为 一 种 连结 主机 和 外 围 设备 的 接口 ， 支 持 包 括 磁 盘 驱 
动 器 、 磁 带 机 、 光 驱 、 扫 描 仪 在 内 的 多 种 设备 ， 主 要 功能 是 在 主机 和 存储 设备 之 间 传 送 
命令 、 状 态 和 块 数据 。 


iSCSI (Internet SCSI f 把 SCSI 命 令 和 块 状 数据 封装 在 TCP 中 在 IP 网 络 中 传输 ， 基 本 出 
发 点 是 利用 成 熟 的 网络 技术 来 实现 和 延伸 SAN。 


FC (Fibre Channel) 即 光纤 通道 ， 是 一 种 用 于 构造 高 性 能 信息 传输 的 、 双 向 的 、 点 
对 点 的 串 行 数据 通道 , ` 主 要 应 用 于 FC SAN 存 储 网 络 中 。 


SAs( 串 行 连接 yGslh: 是 一 种 访问 计算 机 外 围 设备 的 方法 ， 它 在 电缆 中 使 用 串 行 方式 传输 
数字 数据 。 奸 行 连接 Csl 优 于 早期 的 并 行 技 术 ， 串 行 数据 传输 允许 使 用 比 并 行 数 据 传 
输 更 长 的 电缆 。 

PCIe: 即 PCI Express， 是 新 一 代 的 总 线 接口 。 采 用 了 目前 业内 流行 的 点 对 点 串 行 连接 
入 此 起 PCI 以 及 更 早期 的 计算 机 总 线 的 共享 并 行 架 构 ， 每 个 设备 都 有 自己 的 专用 连接 ， 
不 需要 向 整个 总 线 请 求 带 宽 ， 而 且 可 以 把 数据 传输 率 提 高 到 一 个 很 高 的 频率 ， 达 到 PCI 
所 不 能 提供 的 高 带宽 。 


以 上 相关 技术 在 后 面 的 章节 中 将 有 更 详细 的 描述 。 


块 级 虚拟 化 技术 


。 一 种 新 型 RAID 技 术 。 该 技术 将 硬盘 划分 成 若干 固定 大 小 的 块 (chunk) , 
然后 将 其 组 合成 若干 个 小 RAID 组 。 


xX 


Extent Extent Extent Extent dentaj, LUN 
Extent [Eent] Exem [Enen] eke} 
< 4 Cs Ex 
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DEA 


块 虚 拟 化 是 一 种 新 型 RAID 技 术 。 将 硬盘 划分 成 若干 固定 大 小 的 块 (chunk) ， 然 后 将 
其 组 合成 小 RAID 组 (CKG) 。 RAID 的 组 成 不 再 以 硬盘 为 单位 ， 而 以 chunk 为 单位 。 
。 块 虚拟 化 技术 的 特点 : 
o 将 数据 分 布 到 系统 中 所 有 硬盘 * 充分 发 挥 系统 的 读 写 处 理 能 
o 某 一 硬盘 失效 时 ， 存 储 池内 的 其 它 硬盘 都 会 参与 重 构 ， 消 除 传统 RAID 下 的 重 构 性 
能 瓶颈 ， 提 高 了 重 构 数据 的 速度 。 


o 存储 系统 按照 用 户 设置 的 “数据 迁移 粒度 ”将 CKG 划 分 为 更 小 的 extent， 若 干 
extent 组 成 了 用 户 需要 使 用 的 LUN。 在 存储 系统 中 申请 空间 、 释 放空 间 、 迁 移 数 
据 都 是 以 exteni 为 单位 进行 的 。 


0 170 


0 


SmartTier 技 术 


。 SmartTier 动 态 分 级 存储 技术 自动 将 不 同 活跃 度 的 数据 和 不 同 特点 的 
存储 介质 动态 匹配 ， 提 高 存储 系统 性 能 并 降低 用 户 成 本 。 


K 


高 性 能 层 : SSD 硬 盘 


am À 性 能 层 : SAS 




















AE NER 
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。 存储 系统 支持 的 存储 介质 包括 : 

o SSD (Solid State Drive) 硬盘 

o SAS (Serial Attached SCSI) 硬盘 

o NL (Near Line) SAS 硬 盘 

不 同 存储 介质 在 存储 成 本 和 存储 性 能 方面 的 差异 很 大 ， 这 导致 用 户 难 以 在 存储 成 本 和 
存储 性 能 之 间 权 衡 。SSD 硬 盘 的 响应 时 间 很 短 ， 每 单位 存储 请 求 处 理 成 本 很 低 ， 但 每 单位 
存储 容量 成 本 很 高 。NL SAS 硬 盘 每 单位 存储 容量 成 本 较 低 ， 但 响应 时 间 很 长 且 每 单位 存储 
请 求 处 理 成 本 很 高 。SAS 硬 盘 介 于 以 上 两 者 之 间 。 

SmartTier 能 提高 存储 系统 整体 性 能 并 降低 用 户 成 本 。 成 本 包括 硬件 和 软件 的 采购 、 空 
间 、 能 耗 和 管理 开支 。 

smartTier 进 行 LUN 级 别 的 智能 化 数据 存放 管理 。SmartTier 统 计 和 分 析 数 据 的 活跃 度 ， 
将 不 同 活跃 度 的 数据 和 不 同 特 点 的 存储 介质 动态 匹配 。SmartTier 通 过 数据 迁移 将 活跃 度 高 
的 “繁忙 ”数据 迁移 至 具有 更 高 性 能 的 存储 介质 (如 SSD 硬 盘 ) ， 将 活跃 度 低 的 “空闲 ” 
数据 迁移 至 具有 更 高 容量 且 更 低 容量 成 本 的 存储 介质 (如 NL SAS 硬 盘 ) 。 

smartTier 的 统计 、 分 析 和 迁移 活动 基于 SmartTier 的 实现 策略 和 数据 的 性 能 要 求 。 在 统 
计 并 分 析 、 迁 移 活动 期 间 ， 不 会 对 现 有 业务 连续 性 和 数据 可 用 性 造成 影响 。 


178 [] 


SmartQoS 技 术 


。 3mortQos 是 一 种 性 能 特性 ， 通 过 动态 地 分 配 存储 系统 的 资源 来 满 
足 某 些 应 用 程序 的 特定 性 能 目标 。 


按照 规定 的 速率 | 令 || X 


o À S (i 4 
主机 IO 请 求 binini ESS 获得 调度 处 理 


I -tM 


FRERE 


对 IO 请 求 分 类 Qt 


进入 等 待 队 列 等 待 到 令 牌 桶 获取 令 牌 
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随 着 存储 技术 的 不 断 进 步 ， 存 储 系统 能 够 提供 的 存储 容量 越 来 越 大 ， 越 来 越 多 的 用 户 
选择 将 不 同 的 应 用 程序 后 端 存储 部 署 在 同 S 合 存储 设备 上 ， 但 同时 也 带 来 了 如 下 问题 : 
。 不 同 应 用 程序 之 间 由 于 业务 模型 和 MO 特征 不 同 相互 影响 ， 导 致 存储 系统 整体 性 


能 受到 影响 。 


。 不 同 应 用 程序 相互 争 抢 系统 带宽 和 IOPS 资 源 ， 关 键 业 务 性 能 无 法 得 到 保证 。 

SmartQos 技 术 能 够 帮助 用 户 侣 理 利用 存储 系统 的 资源 ， 同 时 保证 关键 业务 的 性 能 。 
SmortQos 特 性 允许 用 户 根据 应 用 程序 数据 的 一 系列 特征 (IDP3 或 占用 带宽 ) 对 每 一 种 应 用 
程序 设置 特定 的 性 能 目标 。 人 存储 系统 根据 设 定 的 性 能 目标 ， 动 态 分 配 存储 系统 的 资源 来 满 
足 特 定 应 用 程序 的 服务 级 别 要 求 ， 优 先 保证 关键 性 应 用 程序 服务 级 别 的 需求 。 

SmartQos 技 术 基 于 令 牌 桶 原理 实现 ， 用 户 每 配置 一 个 SmartQos 策 略 ， 系 统 会 根据 用 
户 设 置 的 性 能 目标 生成 一 个 令 牌 桶 。 按 照 用 户 配置 的 性 能 目标 周期 性 向 令 牌 桶 中 放 入 一 定 
数量 的 令 牌 每 一 个 受 这 个 smartQos 策略 控制 的 /O 请 求 都 必须 从 令 牌 桶 中 获得 一 个 令 牌 
才能 得 到 处 理 ， 如 果 令 牌 桶 中 的 令 牌 取 空 ， 则 只 能 在 等 待 队 列 中 等 待 系统 下 一 次 放 入 令 牌 
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Smart Thin 技 术 


。 SmartThin 能 够 实现 按 需 分 配 存储 空间 。 在 存储 空间 配额 范围 内 ， 应 
用 服务 器 用 到 多 少 空间 ， 存 储 系统 才 给 它 分 配 多 少 空间 ， 从 而 节省 
了 宝贵 的 存储 资源 。 





/ 
Volume B (< 


本 
+» Volume B 


Volume A ({ 


>> Volume A 


Traditional Thin 
Allocation Provisioning 
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。 SmartThin 是 一 种 按 需 分 配 的 方式 来 管理 存储 空间 的 技术 ， 利 用 虚拟 化 方法 减少 物理 存 
储 部 署 ， 可 最 大 限度 提升 存储 空间 利用 率 。 


。 Smart Thin 提供 按 需 分 配 的 存储 管理 方式 。 
。 Smart Thin 提 供 精 简 LUN， 按 用 户 的 实际 需求 分 配 物 理 存储 空间 。 
e Smart Tier、Smart Thin, Smart QOS 可 以 同时 启用 。 


0 180 0 


操作 分 级 管理 


。 Level 0: 无 影响 ， 不 进行 处 理 
。 Level 1: 提示 
。 Level 2: 警告 


。 Level3: 危险 





Mb Huawei 


通过 对 产品 所 有 软件 操作 带 来 的 影响 进行 分 析 (FMEA) ， 按 影响 级 别 进行 对 应 的 防 
误 操 作 设计 ， 有 效 预 防 由 于 人 为 因素 引起 的 错误 操作 。 


根据 系统 、 业 务 与 数据 、 性 能 三 个 关键 因素 对 操作 进行 分 级 ， 有 效 区 分 操作 对 存储 阵 
列 的 影响 ， 根 据 不 同 级 别 的 操作 给 出 对 应 的 提示 信息 ， 确 保 不 会 出 现 误 操作 。 


+: FMEA: Failure Mode andÆffects Analysis 失效 模式 与 影响 分 析 
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华为 存储 阵列 产品 及 应 用 


3. 华为 存储 阵列 基础 配置 


3.1 ISM 软 件 介 绍 


讨厌 出 两 


3 7 ZAHR SE 
2.4 FA ALACE 
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ISM 简 介 


。 ISM 是 一 种 集成 存储 管理 平台 ，ISM 基 于 SMI-S 协 议 ， 可 以 管理 多 套 设 


备 。 





| OceanStor ISM 


能 ， 查 找 当前 网 络 中 的 存储 设备 。 


& 发 现 设备 


DD 快速 学 习 OceanStor ISMENA 
SA nnp www huawei com 


不 再 显示 此 对 话 杠 





欢迎 使 用 OceanStor 1SM 焦 成 存储 管理 系统 ， 进 入 管理 系统 前 建议 您 使 用 “发 现 设备 ” 功 
设备 


会 基于 SMLS 标 准 的 管理 系统 
MEL TTÉRE D ELITE PUS 


Ar 友好 的 的 作 界面 
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W Huawei 


ISM (Integrated Storage Management) 是 华为 科技 有 限 公司 针对 存储 系列 产品 开发 的 


o 友好 的 界面 以 及 详细 的 系统 提示 信息 ; 


o 系统 采用 JWS (JavalWeb Start) 方式 部 署 ， 可 方便 的 自动 安 


o 提供 用 户 鉴 权 , /保证 系统 安全 性 。 


存储 管理 软件 。 目 前 包括 ISM 设 备 管理 套件 、ISM 云 存储 管理 软件 、ISM 存 储 网 络 管理 软件 。 
我 们 在 配置 阵列 时 一 般 只 用 到 ISM 设 备 管理 套件 。 并 且 已 经 实现 同时 支持 管理 多 种 设备 类 
型 ， 目 前 包括 N8000、VIS、 存 储 阵列 。 


。 ISM 具 备 以 下 特性 : 


运行 ; 


0 180 
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ISM 设 备 管理 套件 功能 





4 








à 7 — 
D. Ag | QC | 
”SM 套件 功能 _ = 集成 到 网 管 


存储 业务 管理 goss 
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多 种 设备 集中 管理 : 对 华为 的 AN、NAS、 虚 拟 化 等 存储 设备 实现 集中 管理 。 
设备 自动 发 现 : 自动 发 现 网 络 中 的 存储 设备 ， 无 须 用 户 逐 一 添加 设备 。 


统一 的 故障 管理 : 网 络 中 存储 设备 出 现 的 任何 故障 都 可 以 实时 的 通知 到 管理 软件 ， 并 可 
以 通过 短信 、Emoail 发 送 给 管理 呈 。 


存储 业务 管理 : 对 存储 空间 分 配 、 据 贝 、 快 照 、 镜 像 ， 提 供 向导 功 能 指导 管理 员 轻 松 
完成 业务 配置 。 


性 能 管理 : 监控 和 显示 系统 的 性 能 指标 ,识别 系统 的 瓶颈 ， 最 多 可 监控 一 个 月 的 性 能 交 
据 。 


权限 管理 : 根据 管理 员 级 别 ， 提 供 不 同 的 操作 权限 。 


集成 到 大 型 网 管 站 ,支持 对 主流 大 型 网 管 系统 的 对 接 ， 可 以 与 华为 2000 系 列 网 管 、 
Symantec CCSs HP OpenView, IBM TSM 等 网 管 进行 集成 。 


安全 管理 使 用 SSL，CHAP Secret、MD5 加 密 以 保障 系统 的 安全 。 


ISMÈ 4 


。 在 管理 终端 的 浏览 器 中 输入 所 连接 控制 器 的 管理 口 的 IP 地 址 ; 
。 ISM 是 基于 JRE， 因 此 维护 终端 要 先 安装 JRE， 才 能 安装 ISM; 


OceanStorISM K 


MASRAES MAS Eaei (| 


(基于 SMLs 杯 他 管理 和 RS 
ah EN 
;友好 的 撞 作 界面 
y  FHMNEEA à 
EM On, Wir 
< in 


A OceanStor ISMER RRITE RE 1.6.0_10 及 以 上 版 本 运行 ， 推 荐 版 本 JRE 1.6.0 20e ROME menu Trans 











Copyright © 2013 Huawei Technologies Co., Ltd. All rights reservéd. ` w HUAWEI 





。 ISM 安 装 软件 获取 途 
o 官方 网 站 ; 
o 随机 光盘 ; 
o 输入 设备 管理 |P, 通 过 设备 目的 王 载 连接 下 载 安 装 。 
。 管理 终端 必须 与 存储 阵列 控制 器 的 管理 网 口 实现 IP 互 通 。 
。 目前 SM 软 件 只 支持 windews 的 管理 终端 ; 
。 管理 口 的 默认 IP 地 址 是 A 控 9192.168.128.101; B 控 192.168.128.102。 


如 果 出 现 SM 不 能 安装 或 者 登录 的 问题 ， 建 议 印 载 原 有 的 JRE， 安 装 M 配 套 的 或 者 版 
本 更 高 的 JRE。 


o0 180 


ISM 发 现 新 设备 


OceanStorISM 


欢迎 使 用 Ocean Stor 1SM 集 成 存 访 管理 系统 ， 进 入 管理 系统 前 建议 您 使 用 “发 现 设备 ” 功 
能 ， 查 找 当前 网 络 中 的 存 诗 设备 。 
sq Ú 基于 SMLHS 标 准 的 管理 系统 
© 发 现 设备 ear 以 集成 存储 管理 系统 可 管理 支持 SMI 
RARES 
À 友好 的 操作 界面 
快速 学 习 OceanStor ISM 操 作 方法 操作 界面 易 用 、 简 捷 ， 使 管理 和 维护 工作 更 加 略 
wa hittp/Wwww huawei com 


会 实时 的 信息 采集 


不 再 显示 此 对 话 框 
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安装 好 ISM 后 ， 会 在 桌面 出 现 SM 图 标 ， 双 击 SM 图 标 或 者 “开始 ”程序 菜单 中 点 击 
ISM 图 标 。 语 言 选 择 中 ， 选 择 中 文 ， 点 击 确定 和 % 在 弹出 的 欢迎 界面 中 点 击发 现 设备 或 者 关 
闭 欢迎 界面 ， 通 过 主 界面 发 现 设备 。 


勾 选 欢迎 界面 中 的 “不 再 显示 此 对 话 框 ”， 下 次 启动 的 时 候 就 不 会 再 显示 此 页 面 。 


0 186 0 


ISM 发 现 新 设备 


请 输入 登录 设备 的 用 户 名 和 密码 ， 然 后 选择 设备 类 型 和 发 现 方式 。 
En 





输入 设备 管理 | — 
用 户 和 密码 Ç 


设备 类 型 。「 存储 单元 输 六 设备 管 
理 


发 现 方式 À 网 口 IP 
© 指定 PP 地 址 (指定 设备 管理 网 口 IP 地 址 进行 发 现 ) > 
IP 地 址 192.168.128.101 
指定 IP 地 址 段 (指定 设备 管理 网 口 IP 地 址 段 进行 发 现 ) 














同一 子 网 在 客户 讽 所 在 相同 子 网 中 进行 发 现 ) 








Æo | www 
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默认 的 控制 器 管理 口 P 地 址 
o A 控 : 192.168.128.101/24 
o B 控 : 192.168.128.102/24 
默认 的 用 户 名 和 密码 
o 用 户 名 : admin 
o 密码: Admin@storage 
发 现 新 设备 时 发 现 方式 有 三 种 ， 分 别 为 “指定 IP 地 址 ”“ 指 定 IP 地 址 段 ”“ 同 一 子 网 ”; 
管理 网 口 可 以 更 改 立 但 是 不 能 和 业务 网 口 在 同一 个 网 段 
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ISM 主 界面 主要 内 容 包含 : 


. 菜单 栏 : 包括 “系统 ”、“ 性 能 ”、 “事件 ”和 “帮助 ” 4 个 菜单 ， 主 要 功能 如 下 : 


o 系统 : 提供 发 现 设备 、 任 务 管理 器 、 常 用 设置 、 刷 新 、 锁 定 系统 和 退出 SM 客 户 端 
等 功能 。 

o 性 能 : 提供 对 存储 系统 的 存储 设备 、 前 端 主机 端口 、LUN 和 链 路 的 性 能 统计 功能 。 

o 事件 : 提供 对 存储 系统 事件 管理 、 客 户 端 声 音 设置 和 客户 端 短 消 息 通 知 设置 功能 。 


. 工具 栏 : 提供 了 常用 操作 的 快捷 图 标 ， 主 要 包括 “发 现 设 备 ” 、 “性 能 统计 ”、“ 事 


件 管理 ” 和 “刷新 |” S 


. 操作 区 显示 相应 导航 树 节点 的 信息 ， 能 够 显示 设备 示意 图 和 对 应 的 设备 信息 或 逻辑 组 件 


信息 。 设 备 图 上 可 以 单 击 对 应 的 对 象 查看 其 属性 。 设 备 信息 详细 罗列 了 左 侧 节 点 对 象 的 
言 息 以 及 该 节点 下 级 的 关键 信息 。 包 含 : (1) 设备 基本 信息 (2) 软件 版 本 信息 (3) 
主机 /主机 组 统计 信息 (4) 存储 资源 的 统计 信息 (5) 硬件 信息 统计 


. 故障 统计 栏 显示 系统 中 的 故障 统计 信息 。 通 过 故障 统计 栏 可 以 查看 系统 当前 存在 的 紧急 、 


重要 和 警告 三 种 级 别 故障 信息 的 数量 。 当 存储 设备 有 故障 告警 音 提 示 时 ， 通 过 故障 统 
计 栏 左 侧 的 “关闭 当前 客户 端 声音 ”按钮 ， 可 以 关闭 ISM 的 事件 提示 音 。 


. 状态 栏 显示 任务 管理 和 登录 ISM 时 间 信 息 。 


ISM 导航 树 





O 所 有 设备 (1) 
E 29.1109 
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ISM 导 航 树 显 示 了 当前 SM 所 管理 的 存储 系统 的 逻辑 结构 。 通 过 选择 不 同 的 导航 树 节点 ， 
右 侧 操作 区 将 显示 设备 示意 图 、 对 应 的 设备 信息 或 逮 辑 组 件 信息 。 


通过 导航 树 中 相应 模块 的 操作 和 配置 可 以 完成 对 存储 设备 的 业务 配置 和 系统 管理 。 


o0 1890 


ISM 功 能 模块 介绍 一 一 配置 助手 


。 ISM 的 配置 助手 提供 常用 操作 的 向 导 ， 引 导 您 方便 、 快 速 地 对 存储 设 
备 进 行业 务 配 置 。 主要 配置 选项 如 下 : 


K 





基础 配置 


Ep 扩展 LUN 


创建 CWN 考 由 
分 本 存储 空间 


他 | 建 远程 复制 
ED ESC 
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。 初始 化 配置 向 导 

在 ISM 客 户 端 发 现 设 备 后 ， 可 以 通过 初始 化 配置 向 导 对 存储 设备 进行 相关 设置 ， 包 括 
设备 基本 信息 设置 、 设 备 时 间 设 置 、F@ 端 品 信 息 设置 、iSCSl 端 口 信 息 设置 、 事 件 通 知 设 
置 、License 管 理 。 
。 分 配 存储 空间 向 导 

该 向 导 将 引导 您 创建 存储 空间 ;将 存储 空间 分 配给 主机 或 主机 组 使 用 。 
e 扩展 LUN 

当 LUN 的 剩余 容量 不 能 满足 业务 需求 ， 存 储 系统 中 存在 空闲 空间 时 ， 通 过 将 空闲 的 空 
间 合 并 到 剩余 容量 不 足 的 LUN 上 ， 对 LUN 的 容量 进行 扩充 。 
。 创建 快照 

快照 是 源 EUN 在 某 个 时 间 点 的 静态 映像 。 快 照 被 激活 后 ， 当 源 LUN 的 数据 被 修改 时 ， 
修改 前 的 数据 会 被 拷贝 到 资源 池 中 。 如 果 对 源 LUN 的 数据 进行 了 误 操 作 ， 可 以 通过 快照 回 
滚 操作 将 源 LUN 的 数据 恢复 到 快照 时 间 点 的 状态 ， 实 现 对 源 LUN 数 据 的 保护 。 通 过 该 向 导 ， 
您 可 以 创建 虚拟 快照 或 定时 快照 。 
。 ALUNAN 

LYUN 找 贝 将 源 LUN 的 数据 拷贝 到 目标 LUN 中 。 当 源 LUN 中 的 数据 出 现 故 障 时 ， 可 以 使 
用 目标 LUN 中 的 数据 ， 或 通过 目标 LUN 恢 复 源 LUN 中 的 数据 。 通 过 该 向 导 ， 您 可 以 创建 设 
备 内 或 设备 间 的 LUN 拷 贝 。 


0 IT 


ISM 功 能 模块 介绍 一 一 配置 助手 


。 ISM 的 配置 助手 提供 常用 操作 的 向 导 ， 引 导 您 方便 、 快 速 地 对 存储 设 
备 进行 业务 配置 。 主要 配置 选项 如 下 : 
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。 创建 远程 复制 

通过 创建 远程 复制 可 以 将 主 端 存 储 设 备 上 的 数据 以 LUN 为 单位 拷贝 到 远 端 存储 设备 上 ，， 
实现 数据 的 异地 容 灾 。 
。 创建 分 裂 镜像 


创建 分 裂 镜像 后 ， 使 用 分 裂 镜像 可 以 同时 生成 多 份 源 LUN 在 分 裂 时 间 点 的 物理 拷贝 。 
对 拷贝 的 数据 可 以 进行 多 次 独立 的 操作 ， 不 会 对 源 LUN 中 的 数据 产生 任何 影响 。 


o0 190 


ISMH RÉ RRIR TE — 72 


。 通过 系统 配置 模块 ， 可 对 存储 系统 的 基本 信息 进行 配置 ， 了 解 存储 
系统 的 状态 ， 对 系统 的 性 能 进行 实时 地 监控 ， 及 通过 高 级 配置 提升 
系统 的 安全 性 和 可 用 性 。 





= 志 
sans || È ARE < 高 级 
License 管 理 PAN Feie Sha REISNER 
Trap IP 地 址 管理 查看 历史 监控 数据 








(RISCS J 
性 能 监控 设置 


坎 件 升级 
、 导入 导出 性 能 告 基 病 值 设置 补丁 管理 


导入 配置 文件 安全 性 能 监控 文件 转 储 设置 
导出 配置 文件 党 用 户 管理 性 能 监控 文件 管理 误 码 统计 
域 认证 服务 器 设置 合并 监控 文件 系统 节能 信息 


导出 运行 数据 
导出 系统 日 志 可 访问 IP 地 址 管理 HRÈE 导出 硬盘 日 志 
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。 基本 配置 

实现 对 设备 时 间 管 理 。 通 过 license 管理 功能 ， 可 以 浏览 License 信 息 、 导 入 并 激活 
License 文 件 。 
。 事件 日 志 

实现 对 设备 事件 、 告 警 等 信息 的 提醒 、 保 存 等 管理 。 
。 导入 导出 

实现 对 配置 文件 的 导入 和 导出 操作 ， 对 运行 数据 及 系统 志 的 收集 和 导出 操作 。 
。 性 能 监控 

实现 对 设备 性 能 监控 的 配置 和 监控 信息 的 收集 和 文件 管理 。 
。 安全 

实现 对 用 户 管理 、 域 认证 管理 和 基于 IP 访 问 的 管理 。 

。 高 级 


192 [] 


实现 SNs 服 务 配置 、 修 改 SC3I 设 备 名 称 、 软 件 升 级 、 补 丁 管理 等 


ISM 功 能 模块 介绍 一 一 设备 信息 





控制 框 0 {前 视图 ) 


控制 框 0 (后 视图 ) 
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。 点 击 导 航 树 “设备 信息 ” ， 进 入 设备 信息 界面 ， 主 要 是 实时 显示 设备 的 各 个 组 件 状 态 ， 
包括 框 、 控 制 器 、 端 口 和 硬盘 等 。 点 击 设备 图 上 的 图 标 ， 可 以 显示 该 组 件 的 详细 信息 。 


o 框 : 通过 ISM 的 框 管理 功能 ， 可 以 修改 控制 框 或 硬盘 框 的 ID ， 查 看 控制 框 或 硬盘 
框 的 信息 以 及 框 上 各 组 件 的 信息 。 


o 控制 器 : 通过 控制 器 管理 功能 ， 可 以 设置 控制 器 的 Cache 高 低 水 位 来 控制 
Cache 中 的 脏 数 据 的 容量 4 修改 控制 器 上 的 管理 网 口 IP 地 址 。 


o 接口 模块 : 通过 接口 模块 管理 功能 ， 可 以 对 每 个 接口 模块 进行 上 电 和 下 电 操 作 。 
o 端口 : FC、iSGsl 端 口 的 绑 定 、 修 改 等 操作 ， 以 及 端口 列表 详细 信息 ; 


o 硬盘: 硬 通过 对 硬盘 的 管理 ， 可 以 为 创建 的 RAID 组 设置 热 备 盘 ， 对 硬盘 实现 定位 
功能 ， 对 硬盘 进行 扫描 检查 硬盘 上 数据 的 一 致 性 。 
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1. 存储 阵列 系统 组 成 
2. 存储 阵列 通用 技术 
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3.1 ISM 软 件 介绍 


3.2 存储 基础 配置 
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创建 RAID 
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。 存储 设备 支持 RAID 0、RAID 1, RAID 3, RÄID'5, RAID 6, RAID 10 和 RAID 50， 可 以 
根据 不 同 的 应 用 创建 不 同 级 别 的 RAID 组 ， 各 种 RAID 组 适用 的 应 用 场景 如 下 所 示 : 


口 


口 


口 


RAID 0: 适用 于 以 读 写 性 能 为 第 一 要 求 ， 且 数据 保护 要 求 最 小 的 应 用 。 
RAID 1: 适用 于 以 数据 安全 为 第 一 要 求 的 应 用 。 


RAID 3: 适用 于 对 存储 性 能 < 数据 安全 和 存储 成 本 兼顾 的 应 用 。RAID 组 中 的 一 个 
硬盘 作为 校 验 盘 。 任 意 六 成 员 盘 失效 ，RAID 组 降级 仍 能 正常 工作 。 

RAID 5: 适用 于 对 存储 性 能 、 数 据 安 全 和 存储 成 本 兼顾 的 应 用 。RAID 组 中 存在 分 
散在 不 同 条 带 上 的 奇 得 校 验 数据 。 任 意 一 个 成 员 盘 失 效 ，RAID 组 降级 仍 能 正常 工 
作 。 

RAID 6 适用 于 对 数据 安全 要 求 较 高 的 应 用 。 任 意 两 个 成 员 盘 失效 ，RAID 组 降级 
仍 能 正常 工作 , 

RAID T0: 适用 于 既 有 大 量 数据 需要 存 取 ， 同 时 又 对 数据 安全 性 要 求 严格 的 应 用 
， 如 银行 、 金 融 、 商 业 超市 、 仓 储 库房 、 各 种 档案 管理 等 。 

RAID 50: 适用 于 既 有 大 量 数据 需要 存 取 ， 同 时 对 数据 安全 性 要 求 较 高 的 应 用 。 
RAID 50 是 RAID 5 与 RAID 0 两 种 技术 的 结合 ， 至 少 需要 6 个 空闲 盘 。 

创建 RAID 组 时 ，RAID 组 成 员 盘 的 类 型 应 保持 一 致 。 如 果 存储 系统 中 存在 SATA 硬 
盘 和 NL SAS 硬 盘 时 ， 可 以 选择 SATA 硬 盘 和 NL SAS 硬 盘 作 为 同一 个 RAID 组 的 成 员 
盘 。 


0 
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RER 


势 备 盘 管 理 


T) 查看 、 管 理 执 备 盆 信 息 。 当 决 存 线 池 中 的 成 员 佐 失效 ， 被 指定 的 要 备 全 即 可 承 壹 失效 成 员 会 的 烤 括 . MERRERET. 


nsn 


em: 


容量 LI Le 运行 状态 NRR DE: 


30068 EW zaman z K 


勾 选 空闲 盘 后 "| 
要 点 击 箭头 移 
DEEE 


LL mans “和 运行 状态 | aean x 
78.0008 ER at s 
278.00GB ER Tir 

278.0068 EW 

278.0008 TR wa 

278.0005 FM 


1260008, FE 





CE Rn 
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。 热 备 盘 管理 


o 热 备 盘 是 被 指定 用 于 替代 RAID 组 内 故障 成 员 盘 的 硬盘 ， 完 成 的 任务 是 承载 故障 硬 
盘 中 的 数据 。 通 过 热 备 盘 管理 可 以 将 空闲 盘 设置 为 热 备 盘 或 将 热 备 盘 设置 为 空闲 
À 0 


e 设置 热 备 盘 
0 在 导航 树 上 ， 展 开 存储 设备 下 的 “存储 资源 ”节点 


o Ah CRAN DE 

o 在 右 侧 信息 展示 区 选择 “ 热 备 盘 管理 ”。 系统 弹出 “ 热 备 盘 管理 ”对 话 框 。 
0 在 “空闲 盘 ” 区 域 框 中 ， 勾 选 需要 设置 为 热 备 盘 的 空闲 盘 。 

o 单 击 图 标 、 空 闲 盘 移动 到 “ 热 备 盘 ” 区 域 框 中 。 


o 单 击 “确定 ”。 系统 弹出 “执行 结果 ”对 话 框 ， 提 示 操 作成 功 。 
o 单 击 关闭 ” 
。 取消 热 备 盘 


bs 在 导航 树 上 ， 展 开 存 储 设 备 下 的 “存储 资源 ”节点 

0 单 击 “ 块 存储 池 ” 节 点 。 

0 在 右 侧 信 息 展示 区 选择 “ 热 备 盘 管理 ”。 系统 弹出 “ 热 备 盘 管理 ”对 话 框 。 
0 在 “ 热 备 盘 ” 区 域 框 中 ， 义 选 需要 取消 的 热 备 盘 。 
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创建 LUN 


创建 LUN 
RAIDE 

名称 

RADHI). RAID 5 


晤 大 连 法 空间 容量 339.00GB 


LUN 
如 果 同 时 自 建 多 个 LUN ,输入 的 LUN 名 称 作为 前 如 ， 系 纺 根 才 数 量 是 动 淄 加 启运 
“_001"”、“_002” 等 末 区 分 多 个 LUN。 每 次 包 建 的 LUN 数 排 最 多 00 个 。 
LUN001 
1 
创建 LUN 的 时 候 要 
考虑 好 分 条 深度 的 
大 小 ， 创 建 好 后 不 
能 再 修改 SET 
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。 名 称 
o 名 称 不 能 重复 ， 只 能 包含 半角 的 字母 、 半 角 的 数字 、“.“、““、“-" 和 简体 中 文 
字符 ， 且 “不 能 作为 首 字 符 \ 长 订 为 1~32 个 字符 〔1 个 中 文字 符 占 3 个 字符 长 度 
) 。 
。 分 条 深度 


o 新 建 LUN 的 分 条 深度 分 条 深度 是 指 在 使 用 分 条 数据 映射 的 硬盘 设备 中 ， 条 带 内 
的 块 大 小 。 也 指 在 硬盘 设备 的 单个 成 员 盘 区 中 ， 连 续 编 址 的 虚拟 硬盘 块 映 射 到 连 
续 编 址 的 块 的 大 小 。 分 条 深度 取 值 包括 “4 KB” “8 KB”. “16 KB". “32 KB” 
、 “64 KB”< “128 KB”, “256 KB“ 和 “512 KB“8 种 。 


oO 由 于 分 条 深度 影响 到 VO 性 能 ， 因 此 在 不 同 的 应 用 场景 下 应 适当 选择 分 条 深度 大 小 

。 例 如 六 、 当 系统 应 用 于 存储 顺序 数据 较 多 的 情况 下 ， 如 存储 媒体 数据 ， 建 议 设置 

较 大 的 分 条 深度 。 推 荐 设置 为 64 KB。 当 系统 应 用 于 存储 随机 数据 较 多 的 情况 下 ， 
如 存储 事务 处 理 数据 ， 建 议 设置 较 小 的 分 条 深度 。 推 荐 设置 为 32 KB。 


。 归属 控制 器 


o 为 了 实现 控制 器 A 和 控制 器 B 的 负载 均衡 ， 建 议 将 存储 系统 中 的 LUN 分 配给 不 同 的 
控制 器 。 WAA: ” 当 LUN 所 属 RAID 组 的 成 员 盘 为 SAS 盘 或 FC 盘 时 ，LUN 的 归属 控制 
器 可 以 选择 为 “控制 器 A"、 “控制 器 B“ 或 “自动 选择 ”。 当 LUN 所 属 RAID 组 的 成 
员 盘 为 其 他 类 型 时 ，LUN 的 归属 控制 器 只 可 以 选择 :控制 器 A 或 “控制 器 B”。 


0 
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。 存储 阵列 系统 的 组 成 
。 华为 存储 阵列 技术 
。 华为 存储 阵列 基础 配置 
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© 思考 题 


存储 系统 由 哪 几 部 分 组 成 ? 

存储 阵列 一 般 分 为 哪 两 部 分 ”存储 控制 器 的 主要 功能 是 什么 ? 

什么 是 磁盘 保险 箱 技术 和 磁盘 预 拷贝 技术 ? 主要 解决 什么 问题 ? 
什么 是 块 虚拟 化 技术 ? 与 传统 RAID 技 术 有 什么 区 别 ? 

快照 技术 、LUN 拷 贝 、 远 程 复制 技术 有 什么 区 别 ? 

什么 是 Smart Tier 技 术 、Smart Qos 技 术 、Smart Thin 技 术 人 分 别 应 用 
在 什么 场景 ? 





Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. w HUAWEI 


0 199 0 


@ 3% 


。 判断 题 
1， 存 储 阵列 控制 框 主要 由 控制 器 模块 、 风 扇 -BBU 模 块 、 电 源 模 块 以 及 接口 模块 等 
组 成 ， 是 存储 系统 的 核心 部 件 。 (Tor F) 
存储 阵列 的 内 置 8B8U 电 池 可 保证 在 系统 意外 断 电 时 ， 对 Cache 和 硬盘 框 同 昧 供电 / 
让 Cache 中 的 数据 写 到 硬盘 中 ， 实 现 Cache 数 据 永 久保 存 。 (Tor F) 
。 多 选 题 
1， 快 照 技 术 的 特点 主要 包括 以 下 哪 几 方面 ? (  ) 
A. 通 过 快照 可 以 实现 完整 的 物理 上 的 数据 拷贝 。 
B. 快 照 可 以 灵活 生成 多 个 时 间 点 的 数据 副本 ， 在 需要 时 可 羽 快 速 地 恢复 数据 。 
C. 快 照 可 以 瞬间 生成 ， 不 影响 主机 业务 。 
D. 快 照 可 以 根据 用 户 自 定义 的 备份 策略 来 实现 。 
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。 习题 答案 : 
o 判断 题 : 1.T 2.F 
o 多 选 题 : 1.BCD 
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W 
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HC1109104 
SAN 技 术 与 应 用 
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目标 


。 学 习 完 本 章节 后 ， 您 将 能 够 : 
o 掌握 DAS 存 储 基础 知识 
理解 SCSI 协 议 
掌握 SAN 存 储 的 基础 知识 
理解 FC 连 接 和 协议 封装 
掌握 华为 SAN 存 储 的 应 用 
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. DAS 存 储 基础 


SCSI LITA 


SAN 存 储 基础 


FC 连接 与 协议 
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传统 内 置 存 储 遇 到 的 问题 


传统 内 置 存储 


存储 容量 不 足 
。 可 靠 性 不 足 
。 存储 空间 利用 率 低 
。 数据 分 散 
。 扩展 性 问题 
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在 传统 的 计算 机 存储 系统 中 ， 存 储 工作 通常 是 由 计算 机 内 置 的 硬盘 来 完成 ， 而 采用 这 样 
的 设计 方式 ， 硬 盘 本 身 的 缺陷 很 容易 成 为 整个 系统 的 性 能 瓶颈 ， 并 且 ， 由 于 机 箱 内 有 限 的 
空间 ， 限 制 了 硬盘 数量 的 扩展 ， 并 且 同 时 也 对 机 箱 内 的 散热 、 供 电 等 提出 了 严峻 的 挑战 。 
再 加 上 不 同 的 计算 机 各 自 为 战 ， 使 用 各 自 内 置 的 硬盘 ， 导 致 从 总 体 看 来 存储 空间 的 利用 率 
较 低 ， 并 且 分 散 保存 的 数据 也 不 利于 数据 的 共享 和 备份 工作 。 在 传统 的 C/S 架 构 中 ， 无 论 
使 用 的 是 何 种 协议 ， 存 储 设备 都 直接 三 服务 器 相连 接 。 在 这 样 的 结构 下 ， 对 存储 设备 上 所 
保存 的 所 有 数据 的 任何 读 写 操作 ,都 必须 由 服务 器 来 进行 ， 这 样 的 处 理 方式 给 服务 器 带 来 
了 沉重 的 负担 。 外 部 存储 系统 的 出 现 ， 彻 底 将 服务 器 从 繁琐 的 MO 操作 中 解放 出 来 ， 使 服 
务 器 更 加 专门 化 ， 使 之 仅仅 承担 应 用 数据 的 操作 任务 ， 以 更 充分 的 释放 自身 潜能 。 把 存储 
设备 从 服务 器 中 分 离 出 来 使 他 们 变 成 直接 与 网 络 连 接 的 网 络 存储 设备 。 所 以 存储 区 域 网 
中 ， 存 储 设备 不 再 属于 哪个 应 用 服务 器 ， 从 而 可 以 对 存储 设备 实施 集中 管理 ， 使 用 户 可 以 
方便 地 共享 存储 资源 * 为 网 络 上 的 应 用 系统 提供 丰富 的 存储 资源 ， 和 快速 、 简 便 的 访问 方 
式 。 

存储 网 络 建立 了 独立 的 基于 网 络 的 存储 架构 ， 增 强 了 现 有 的 计算 拓扑 架构 。 存 储 网 络 允 
许 存 储 设 备 直 接连 接 到 现 有 网 络 上 ， 也 可 以 通过 专门 的 存储 网 络 进 行 连接 ， 这 一 技术 给 传 
统 的 存储 配置 方案 带 来 了 两 个 重要 的 变化 : 

w 存储 网 络 在 存储 设备 、 服 务 器 以 及 客户 机 之 间 建 立 了 更 多 的 直接 访问 路 径 ， 从 而 使 用 户 
事务 能 够 绕 过 大 量 的 服务 器 / 〇 操作 而 直接 与 数据 发 生 联系 ， 从 而 避免 了 对 服务 器 进行 
不 必要 的 访问 。 

> 存储 网 络 使 得 商务 应 用 系统 能 够 以 更 高 的 效率 访问 数据 。 换 言 之 ， 存 储 网 络 使 得 应 用 系 
统 能 够 更 方便 地 共享 数据 ， 并 赋予 服务 器 更 为 强大 的 数据 连接 能 
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外 置 存储 网 络 形 


。 存储 网 络 几 种 常见 类 型 


1 m 1 
\pplication K ， Application 上 
I 
Software K MT Software 
E— 


File System ] 


Storage 
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直接 连接 存储 (Direct Attached Storage, DAS): 由 于 早期 的 网 路 十 分 简单 ， 所 以 直 
接连 接 存 储 得 到 发 展 。 随 着 计算 能 力 、 内 存 、* 存 储 密度 和 网 络 带 宽 的 进一步 增长 ， 越 来 越 
多 的 数据 被 存储 在 个 人 计算 机 和 工作 站 中 。' 份 布 式 的 计算 和 存储 的 增长 对 存储 技术 提出 了 
更 高 的 要 求 。 由 于 使 用 DAS ， 存 储 设备 与 主机 的 操作 系统 紧密 相连 ， 其 典型 的 管理 结构 是 
基于 SCSI 的 并 行 总 线 式 结构 。 存 储 共享 是 受 限 的 ， 原 因 是 存储 是 直接 依附 在 服务 器 上 的 。 
从 另 一 方面 看 ， 系 统 也 因此 背 上 /沉重 的 负担 ， 因 为 CPU 必须 同时 完成 磁盘 存 取 和 应 用 运 
行 的 双重 任务 ， 所 以 不 利于 CPU 的 指令 周期 的 优化 。 


网 络 连接 存储 (NetworR Attached Storage, NAS): 局 域 网 在 技术 上 得 以 广泛 实施 ， 
在 多 个 文件 服务 器 之 间 实 现 了 互联 ， 为 实现 文件 共享 而 建立 一 个 统一 的 框 染 。 随 着 计算 机 
的 应 用 广泛 ， 大 量 的 不 兼容 性 导致 数据 的 获取 日 趋 复杂 。 因 此 采用 广泛 使 用 的 局 域 网 加 工 
作 站 族 的 方法 就 对 文件 共享 ， 互 操作 性 和 节约 成 本 有 很 大 的 意义 。NAS 包 括 一 个 特殊 的 文 
件 服务 器 和 存储 设备 。NAs 服 务 器 上 采用 优化 的 文件 系统 ， 并 且 安 装 有 预 配置 的 存储 设备 。 
由 于 NAS 是 连接 在 局 域 网 上 的 ， 所 以 客户 端 可 以 通过 NAS 系 统 ， 与 存储 设备 交互 数据 。 另 
外 ，NAS 直 接 运 行文 件 系统 协议 ， 诸 如 NFS，CIFS 等 。 客 户 端 系统 可 以 通过 磁盘 映射 和 数 
据 源 建 立 虚 拟 连接 。 


存储 区 域 网 络 (Storage Area Networks, SAN): 一 个 存储 网 络 是 一 个 用 在 服务 器 和 存 
储 资 源 之 间 的 、 专 用 的 、 高 性 能 的 网 络 体系 。 它 为 了 实现 大 量 原始 数据 的 传输 而 进行 了 专 
门 的 优化 。 因 此 ， 可 以 把 SAN 看 成 是 对 SCSI 协 议 在 长 距离 应 用 上 的 扩展 。SAN 使 用 的 典型 
协议 组 是 SCSI 和 Fiber Channel 。 Fiber Channel 特 别 适合 这 项 应 用 ， 原 因 在 于 一 方面 它 
可 以 传输 大 块 数据 ， 另 一 方面 它 能 够 实现 远 距 离 传 输 。SAN 的 市 场 主 要 集中 在 高 端的 ， 企 
业 级 的 存储 应 用 上 。 这 些 应 用 对 于 性 能 ， 宛 余 度 和 数据 的 可 获得 性 都 有 很 高 的 要 求 。 
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DAS 存 储 的 形态 


外 部 硬盘 阵列 (DAS) 智能 硬盘 阵列 (DAS) 
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。 外 部 硬盘 阵列 : 

JBOD 即 JUst a Bunch Of Disks， 在 逻辑 上 把 几 个 物理 磁盘 串联 在 一 起 ， 其 目的 纯粹 是 
为 了 增加 磁盘 的 容量 ， 并 不 提供 数据 安全 保障 。 能 够 解决 内 置 存储 有 限 硬 盘 槽 位 ， 容 量 扩 
展 不 足 的 问题 。 但 仍然 是 基于 单 硬盘 存放 数据 ， 可 靠 性 差 。 

。 智能 硬盘 阵列 : 

控制 器 中 包含 RAID 功 能 扩大 容量 Cache ， 同 时 使 得 磁盘 阵列 具有 多 种 实用 的 功能 ， 配 

置 专用 管理 软件 进行 配置 管理 。 
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DAS 存 储 的 局 限 性 


。 扩展 性 差 

。 资源 浪费 

。 管理 分 散 

。 异 构 化 问题 
数据 备份 问题 


存储 阵列 设备 
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DAS 存 储 方式 实现 了 机 内 存储 到 存储 子 系统 的 跨越 ， 但 其 也 存在 很 多 局 限 性 : 

1、 扩 展 性 差 : 服务 器 与 存储 设备 采用 直接 连接 的 方式 ， 当 需要 新 增 应 用 服务 器 时 ， 只 能 
为 新 增 的 服务 器 单独 配置 存储 设备 造成 重复 投资 。 

2、 浪 费 资 源 : 存储 空间 无 法 充分 利用 ,存在 浪费 。 不 同 的 应 用 服务 器 面 对 的 存储 数据 量 
是 不 一 致 的 ， 同 时 业务 发 展 的 状况 也 决定 这 存储 数据 量 的 变化 。 因 此 ， 出 现 了 部 分 应 用 
对 应 的 存储 空间 不 够 用 ， 另 二 些 却 有 大 量 的 存储 空间 闲置 。 

3、 管 理 分 散 : DAS 方 式 数据 依然 是 分 散 的 ， 不 同 的 应 用 各 有 一 套 存储 设备 。 管 理 分 散 ， 

4、 异 构 化 严重 : DAS 方 式 使 得 企业 在 不 同 阶段 采购 了 不 同型 号 不 同 厂商 的 存储 设备 ， 设 
备 之 问 异 构 化 现象 严重 ， 叶 致 维护 成 本 据 高 不 下 。 

5、 数 据 备 问题 ; DAS 方 式 与 主机 直接 连接 ， 在 对 重要 的 数据 进行 备份 时 ， 将 会 极 大 地 占 
用 网 络 的 带宽 。 

DAS 特 别 适合 于 对 存储 容量 要 求 不 高 、 服 务 器 的 数量 很 少 的 中 小 型 局 域 网 ， 其 主要 的 
优点 在 于 存储 容量 扩展 的 实施 非常 简单 ， 投 入 的 成 本 少 而 见效 快 。 
DAS 通 常 使 用 SCSI 协 议 实现 主机 服务 器 与 存储 设备 的 互联 。 在 下 一 小 节 将 详细 介绍 

SCSI 协 议 。 
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SCS|I 协 议 与 存储 系统 


e SCSI (Small Computer System Interface ， 小 型 计算 机 系统 接口 ) 最 初 是 一 种 为 
小 型 机 研制 的 接口 技术 ， 用 于 主机 与 外 部 设备 之 间 的 连接 。 


。 SCs3SI 协 议 是 主机 与 存储 磁盘 通信 的 基本 协议 
。 DAS 使 用 SCSI 协 议 实现 主机 服务 器 与 存储 设备 的 互联 。 


SCS1 总 线 


ij 控制 信号 
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计算 机 与 存储 系统 之 间 的 通信 是 通过 总 线 来 完成 的 。 总 线 就 是 从 源 设备 传输 数据 到 目标 
设备 的 路 径 。 在 最 简单 的 情况 下 ， 控 制 器 的 高 速 缓存 作为 源 ， 将 数据 传输 给 目标 磁盘 。 控 
制 器 首先 向 总 线 处 理 器 发 出 请 求 使 用 总 线 的 信号 。 该 请 求 被 接受 之 后 ， 控 制 器 高 速 缓存 就 
开始 执行 发 送 操作 。 在 这 个 过 程 中 ， 控 制 器 占用 了 总 线 ， 总 线 上 所 连接 的 其 它 设备 都 不 能 
使 用 总 线 。 当 然 ， 由 于 总 线 具 备 中 断 功 能 ， 所 以 总 线 处 理 器 可 以 随时 中 断 这 一 传输 过 程 并 
将 总 线 控制 权 交 给 其 它 设 备 ， 以 便 找 行 更 高 优先 级 的 操作 。 


WD en ~ ew ar 息 和 电力 的 高 速 通道 。 例 如 ， 
将 MP3 或 数码 相机 连接 到 计算 机 时 ， 您 可 能 会 使 用 通用 串 行 总 线 (U3B) 端 口 。 对 于 存储 图 
片 、 音 乐 等 的 小 型 电子 设备 ，USB 端 Se i et 
总 线 还 不 足以 同时 支持 整合 计算 机 和 服务 器 以 及 其 他 许多 设备 。 


在 这 种 情况 下 ,` 就 需要 使 用 SCSIl 这 样 的 总 线 。SCSI 直 译 为 小 型 计算 机 系统 专用 接口 
(Small Computer System Interface) 是 一 种 连结 主机 和 外 围 设备 的 接口 ， 支 持 包 括 磁 盘 
了 驱动器、 磁带 机 、 光 驱 、 扫 描 仪 在 内 的 多 种 设备 。 它 由 SCSI 控制 器 进行 数据 操作 ，SCSI 
控制 器 相当 于 一 块 小 型 CPU， 有 自己 的 命令 集 和 缓存 。SC3I 是 一 种 特殊 的 总 线 结构 ， 可 以 
对 计算 机 中 的 多 个 设备 进行 动态 分 工 操作 ， 对 于 系统 同时 要 求 的 多 个 任务 可 以 灵活 机 动 的 
适当 分 配 ， 动 态 完成 。 
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SCSI 协议 模型 


OK 
存储 磁盘 


SCSI 应 用 层 < ee SCSI 应 用 层 xX 


1 . 人 


SCSI 传 输 层 éme SCSI 传 输 层 


小 


SCSI 互 联 层 SCSIERE 
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为 了 便于 实现 和 理解 3CSI 的 各 个 协议 ,。SCSE 采 取 了 分 层 结构 。SCSI 可 分 为 三 层 ， 即 
SCSI 应 用 层 ，SCSl 传 输 层 和 SCSI 互 连 层 。 

在 应 用 层 ，SC5I 协 议 采 用 C/S (客户 /服务 器 ) 体系 架构 ，SCS5I 协 议 客户 端 位 于 主机 ， 
代表 上 层 应 用 程序 、 文 件 系统 和 操作 系统 发 起 MO 请 求 ，SC3I 设 备 服务 器 位 于 目标 设备 (如 
存储 磁盘 ) 中 ， 对 客户 端 MO 请 求 做 出 响应 。 客户 /服务 器 请 求 和 响应 通过 其 下 层 协议 进行 
传输 。 

在 传输 协议 层 ，3C3I 设 备 之 间 通 过 一 系列 的 命令 实现 数据 块 的 传送 ， 大 致 分 成 三 个 阶 
段 : 命令 的 执行 ， 数 据 的 传送 和 命令 的 确认 。 

SC5I 互 联 层 完成 5C5l 设 备 对 总 线 的 连接 以 及 发 送 方 和 目标 方 的 选择 等 功能 。 
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SCSI 协议 寻 址 


区 分 不 同 的 SCS| 总 线 


ED 区 分 SC3| 总 线 上 不 同 的 设备 


逻辑 时 


TS 


区 分 CS 设备 中 的 了 设备 


F D + 
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为 了 对 连接 在 SCSIl 总 线 上 的 设备 寻 址 ，SCSI 协 议 引 入 了 SCSI 设 备 D 和 逻辑 单元 号 LUN。 
在 SCSl 总 线 上 的 每 个 设备 都 必须 有 一 个 唯一 的 ID ， 其 中 包括 服务 器 中 的 主机 总 线 适配器 也 
拥有 设备 ID。 每 条 总 线 最 多 可 允许 有 8 个 或 者 16 个 设备 ID。 


存储 设备 可 能 包括 若干 个 子 设 备 $ 如 虚拟 磁盘 、 磁 带 驱动 器 和 介质 更 换 器 等 。 因此 
SCSI 引 入 了 逻辑 单元 号 ， 以 便于 对 存储 设备 中 的 子 设备 进行 寻 址 。 


传统 的 SC3I 适 配 卡 连接 单个 总 线 ， 相 应 的 只 具有 一 个 总 线 号 。 一 个 服务 器 可 能 配置 了 
多 个 SCSI 控 制 器 ， 从 而 就 可 能 有 多 条 SCSl 总 线 。 在 引入 存储 网 络 之 后 ， “di ps 
(Host Bus Adapter) 或 iSCSI (Internet SCSI) 网 卡 也 都 连接 一 条 总 线 ， 必 须 对 每 一 
总 线 分 配 一 个 总 线 号 Y 在 他 们 之 间 依 靠 不 同 的 总 线 号 加 以 区 分 。 因 此 ， 我 们 可 以 使 用 一 
三 元 描述 标识 一 个 3CS 人 目标 : 总 线 / 目 标 设备 /逻辑 单元 号 。 
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Windows 系 统 查 看 SCSI 设 备 ID 万 式 


常规 ben 。[ 卷 。 | 驱动 程序 | 详细 信息 
HUAWEI SSS00T SCSI Disk Device 
taS 
GEREM) 
Bus Number O, Target Id O, LUN 1 





设 
这 个 设备 运转 正常 。 


| 
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右键 点 击 我 的 电脑 ， 选 择 管理 ， 再 选择 磁盘 管理 光 选 择 映 射 的 磁盘 ， 右 键 选 择 属 性 ， 在 常 
规 选 项 卡 中 查看 位 置 ， 就 是 SCSI| IDÉES 
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Linux 系 统 查 看 SCSI 设 备 ID 方 式 


。 在 Linux 系 统 的 命令 行 中 ， 输 入 命令 Isscsi: 


i # 1sscsi 
] dis ATA ST3160318AS CC65 /dev/sda 
cd/dvd HL-DT-ST DVD-ROM DH1ON OM10 /dew 
. disk HUAWEI _ S5500T 2105 /deyXsdb 
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每 一 行 前 面 方 括号 中 条 目 分 别 是 SCSl host, channel, target number, LUN tuple， 每 个 
元 素 由 冒号 分 开 。 当 有 多 个 SCSI 设 备 条 目 时 按 元 组 升序 排列 。 
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SCSI 命令 描述 块 (CDB) 


发 起 方 通过 命令 描述 块 (command description block) 向 目标 方 发 送 
具体 的 命令 。 

SCSI| 基 础 命令 规范 SPC (SCSI Primary Commands，SCSI 基 础 命令 了 》 定 
义 了 CDB 的 标准 。 

CDB 结 构 如 下 : 





操作 码 
第 ! 字 节 一 


命令 参数 |; 


1~n-1 字 节 





控制 码 
第 n 字 节 一 
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在 互 连 层 完成 SCSI 设 备 对 总 线 的 连接 ， 以 及 发 送 方 和 目标 方 选择 的 基础 上 ， 传 输 层 协议 
执行 实际 的 数据 传输 。 传 输 协议 的 运行 过 程 包括 发 送 命令 、 传 输 数据 和 对 命令 执行 的 确认 。 
发 起 方 通过 命令 描述 块 (CDB) 向 目标 方 发 送 具体 的 命令 。 命 令 描 述 块 有 定 长 和 不 定 长 两 
种 格式 ， 而 定 长 格式 又 有 6、10、12、16 字 节 不 同 的 长 度 规定 。 

。 操作 码 


操作 码 是 所 有 命令 描述 块 都 有 的 ， 它 总 是 被 放 在 命令 描述 块 的 开头 一 个 字 节 。5-7 位 是 
组 代码 ， 指 示 该 命令 具体 属于 哪个 命令 组 ， 它 决定 CDB 的 长 度 ，0-4 位 则 是 具体 的 命令 代码 
。8 比 特 在 理论 上 共有 256 个 可 能 的 操作 码 。 


。 命令 参数 
o 混杂 CDB 信 息 : 该 参数 表示 与 具体 的 CDB 相 关 的 信息 ， 如 表示 逻辑 设备 号 。 
o 逻辑 块 地 址 :该 地 址 是 逻辑 单元 (比如 磁盘 ) 中 的 起 始 操作 块 的 位 置 。 
o 传送 长 度 : 该 长 度 表 示 命 令 所 请 求 的 传送 量 ， 通 常 是 块 数 。 
o 参数 表 长 度 : 表示 需要 传送 到 存储 设备 的 参数 的 长 度 ，0 表 示 不 需要 传递 参数 。 


o DEKE: 分 配 长 度 表 示 应 用 客户 为 缓冲 区 分 配 的 最 大 长 度 ， 根 据 具体 的 CDB 类 别 ， 
可 能 是 字 节 数 ， 也 可 能 是 块 数 。 
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Hs 
SCSI 命令 搞 述 块 〈CDB) 
。 发 起 方 通过 命令 描述 块 (command description block) 向 目标 方 发 送 


具体 的 命令 。 
。 SCSI| 基 础 命令 规范 SPC (SCSI Primary Commands ，SCSI 基 础 命令 三 定 


义 了 CDB 的 标准 。 


。 CDB 结 构 如 下 : 
第 r 字 节 一 Lin 








操作 码 _、 
sr 
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。 控制 码 : 所 有 CDB 格 式 的 最 后 一 个 字 节 。 

o NACA 比 特 是 为 了 让 应 用 能 够 事先 声明 哪些 命令 执行 的 错误 或 异常 需要 善后 处 理 ， 
指定 当 指 令 返 回 CHECK CONDITION 状态 的 时 候 ， 自 动 应 急 处 理 (auto 
contingent allegiance, ACA) 是 否 会 被 创建 。 

o 链接 比特 可 以 被 用 作 跨 越 多 个 指令 延续 任务 。 比 特 为 1 时 表示 发 起 方 请 求 跨越 多 个 
SCSI 指 令 延 续 任务 。 
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SCSI 读 / 写 操作 过 程 


发 起 方 目标 方 


和 API 接口 将 用 户 读 
操作 转换 为 SCSI | N 
读 操作 a 


获得 对 总 线 使 用 “ © 通过 CDB 发 送 3CSI 合 ~ 
权 和 对 目标 方 的 | -> : 
选择 和 寻 址 





在 指定 逻辑 单元 | 
@ RAT IX QE 
求 的 操作 


© 数据 传输 完毕 后 ， 发 送 
命令 完成 的 报告 
接收 到 目标 方 命 - 
Ra 


总 线 可 恢复 到 空 
闲 阶段 "| 
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主机 需要 从 存储 设备 获取 数据 ，SCSl 读 操作 需要 完成 以 下 步骤 : 


1. 主机 操作 系统 需 首 先 将 用 户 的 读 取 操作 通过 SC3SI MO 的 应 用 程序 编程 接口 
(Application Programming Interface, ，APl) 转 化 为 SCSI 的 读 操作 ， 并 在 操作 完成 
通过 相应 的 API 返 回响 应 的 值 。 


2. 发 起 方 SC9| 总 线 由 空闲 阶段 进 从 总 线 仲裁 和 选 先 择 阶 段 ， 获得 天 总 线 使 用 权 以 及 对 目 
标 方 的 选择 和 和 寻 址 。 


3. 发 起 方 通过 CDB 向 目标 方 发 送 SCSI 的 读 命令 。 

4. 目标 方 接 收 到 该 命令 ， 通 过 设备 管理 器 在 指定 的 逻辑 单元 中 执行 该 命令 请 求 的 操作 。 
5. 目标 方 以 字 节 为 单位 向 发 起 方 传送 所 需要 的 数据 。 

6. 在 数据 传输 完毕 后 ， 目 标 方向 发 起 方 发 送 命令 完成 的 报告 。 

7. 发 起 方 接收 到 命令 完成 的 响应 ， 总 线 可 恢复 到 空闲 阶段 。 


SCSI 的 写 操作 过 程 与 读 操作 过 程 类 似 ， 但 数据 传送 的 方向 不 同 ， 它 把 数据 从 发 送 方向 目 
标 方 传 送 。 
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SCSI 协 议 的 常见 类 型 


接口 模式 | 传输 率 (MB/s) | 数据 频 宽 (bits) | TERREA 
SCSI-1 
SCSI-2 


SCSI-3(Ultra SCSI) 


SCSI-3(Ultra Wide SCSI) 


Ultra 2 SCSI 
Ultra-160 SCSI 
Ultra-320 SCSI 


Ultra-640 SCSI 
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目前 常见 的 SC3l 类 型 及 各 自 性 能 特征 如 下 : 


口 


SCSET: 它 是 最 早 的 3Cs| 接 口 ， 它 的 特点 是 支持 同步 和 异步 3Csl 外 围 设备 ， 支 持 7 合 
8 位 的 外 围 设备 ， 最 大 数据 传输 率 为 MB/s. 


SCSI-2: ESCI- FERA, ,是 1992 年 提出 ， 也 称 为 Fasf SCSl。 如 果 采 用 原来 
的 8 位 并 行 数据 传输 则 称 为 “Fast SCSl”， 它 的 数据 传输 率 为 10MB/s， 最 大 支持 连 
接 设 备 数 为 7 台 。 

SCSI-3: 它 是 在 SCSI2 之 后 推出 的 。 如 果 采 用 原来 的 8 位 并 行 数 据 传输 时 称 为 “Ultra 
SCS” ， 它 的 数据 传输 率 为 20MB/S， 最 大 支持 连接 设备 数 为 7 台 。 在 将 并 行 数 据 传 
输 的 总 线 带 宽 提 高 到 16 位 后 出 现 了 “Ultra Wide SCSI”， 它 的 传输 率 又 成 倍 提高 ， 
即 达 到 了 40MB/S 玉 最 大 支持 连接 设备 数 为 15 台 。 

Ultra2 SCSI， 它 是 在 Ultra SCSI 的 基础 上 推出 的 SCSI 接 口 类 型 。 

Ultral 60 SCSI: 它 是 Ultra2 SCSI 的 更 新 接口 ， 使 用 和 Ultra2 SCSI 完全 一 样 的 接口 电 
缆 及 终结 器 ， 但 是 由 于 Ultra160 SCSI 采 用 双 缘 传输 频率 (Double Transition 
Clocking) ， 而 Ultra2 SCSI 采 用 的 是 单 缘 传输 频率 ， 因 此 Ultra160 SCSI 的 传输 率 是 
前 者 的 两 倍 ， 即 160MB/s。 

Ultra320 SCSI: 它 的 技术 规范 为 “SCSI-3 SPI-4”。Ultra320 SCSI 单 通道 的 数据 传 
输 速率 最 大 可 达 320MB/s。 


Ultra640 SCSI: 它 的 技术 规范 为 “SCSI-3 SPI-5”。Ultra640 SCSI 的 数据 传输 速率 
最 大 可 达 640MB/s。 


0 2210 


办 ] 义 - ZA 


3. SAN 存 储 基础 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. 





0 20 


什么 是 SAN ? 


。 SAN: 存储 区 域 网 络 (Storage Area Networks) 


客户 机 ; 
LAN 
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存储 区 域 网 络 (Storage Area Networks，SAN)* 二 个 存储 网 络 是 一 个 用 在 服务 器 和 存储 资 
源 之 间 的 、 专 用 的 、 高 性 能 的 网 络 体系 %SAN 是 独立 于 LAN 的 服务 器 后 端 存 储 专用 网 络 。 
SAN 采 用 可 扩展 的 网 络 拓扑 结构 连接 服务 器 和 存储 设备 ， 每 个 存储 设备 不 隶属 于 任何 一 台 
服务 器 ， 所 有 的 存储 设备 都 可 以 在 全 部 的 网 络 服务 器 之 间作 为 对 等 资源 共享 。 


SAN 主 要 利用 Fibre Channel protocol) (光纤 通道 协议 ) ， 通 过 FC 交换 机 建立 起 与 服务 器 
和 存储 设备 之 间 的 直接 连接 ， 因 此 我 们 通常 也 称 这 种 利用 FC 连接 建立 起 来 的 SAN 为 FC-SAN。 
FC 特别 适合 这 项 应 用 ， 原 因 在 于 一 方面 它 可 以 传输 大 块 数据 ， 另 一 方面 它 能 够 实现 较 远 距 
离 传输 。SAN 主 要 应 用 在 对 于 性 能 、 元 余 度 和 数据 的 可 获得 性 都 有 很 高 的 要 求 高 端 、 企 业 
级 存储 应 用 上 。 


随 着 存储 技术 的 发 展 ， 有 目前 基于 TCP/P 协 议 的 IP-SAN 也 得 到 很 广泛 的 应 用 。IP-SAN 具 备 
很 好 的 扩展 性 、 受 活 的 互通 性 ， 并 能 够 突破 传输 距离 的 限制 ， 具 有 了 明显 的 成 本 优势 和 管理 
维护 容易 等 特点 针对 IP-SAN 技 术 的 详细 内 容 将 在 下 一 章 讲 解 ， 接 下 来 重点 介绍 AN 技术 。 
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SAN ÉLAUZE PA 


直 连 


J 


应 用 服务 器 


光纤 卡 


存储 设备 存储 设备 
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。 直 连 : 主机 与 存储 之 间 通 过 FC HBA 卡 连接 ,这 种 组 网 方式 简单 、 经 济 ， 但 较 多 的 主机 
分 享 存储 资源 比较 困难 ; 

。 单 交换 : 主机 与 存储 之 间 由 一 合 FC 交 换 机 连接 ， 这 种 组 网 结构 使 多 人 台 主 机 能 共同 分 享 
同一 合 存储 设备 ， 扩 展 性 强 ， 但 交换 机 处 存在 单 点 故障 ; 


。 双 交 换 : 同一 全 主机 到 存储 阵列 端 可 由 多 条 路 径 连 接 ， 扩 展 性 强 ， 和 避免 了 在 交换 机 处 形 
成 单 点 故障 。 
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SAN 的 组 件 


。 存储 设备 a E 


。 光纤 交换 机 
。 HBA 卡 和 驱动 
。 光纤 线 缆 


光纤 通道 光纤 网 络 、、 


9 


存储 设备 存储 设备 
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光纤 存储 区 域 网 络 由 四 个 主要 的 部 分 组 成 ， 这 些 组 件 覆 盖 了 I/O 〇 操作 、 存 储 系统 以 及 所 
支持 的 工作 负荷 的 各 个 主要 方面 。 同 时 ,在 3AN 技 术 中 ， 还 需要 一 些 其 它 组 件 进行 集成 ， 
以 构建 完整 的 解决 方案 。 在 考虑 3AN 的 基础 设施 建设 时 ， 我 们 需要 谨慎 地 考虑 构成 AN 基 
础 设施 的 各 个 不 同 的 组 件 ， 因 为 在 SAN 中 ， 这 些 组 件 或 者 相互 独立 运作 ， 或 者 相互 依赖 以 
协同 工作 。 
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SAN 存 储 网 络 特点 


业务 高 性 能 © 
集中 、 远 程 、 灵 活 的 管理 fi ) 
存储 资源 动态 共享 Q 


不 占用 业务 网 络 资源 Q 


高 扩展 性 


兼容 SC5l 存 储 设备 
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与 传统 DAS 存 储 相 比 ， SAN 存 储 网 络 具备 非常 明显 的 优势 : 


， 基 于 FC 光纤 介质 ， 拥 有 干粮 位 的 存储 带宽 ， 更 适合 大 容量 数据 块 业务 高 速 处 理 的 要 求 ， 


目前 主流 带宽 为 8G。 


由 于 SAN 存 储 网 络 中 存储 设备 (如 磁盘 阵列 ， 磁 带 库 等 ) 集中 部 署 ， 可 以 实现 对 设备 


的 集中 管理 ， 同 也 可 以 通过 远程 方式 登录 设备 实现 远程 管理 ， 管 理 方式 更 加 灵活 。 


， 存储 资源 集中 统一 部 署 分 别 映射 给 各 应 用 服务 器 ， 实 现存 储 资源 的 共享 ， 同 时 可 以 


根据 各 应 用 服务 器 对 存储 资源 的 需求 为 其 动态 的 分 配 资源 ， 实 现存 储 资源 的 动态 共享 。 


， 在 SAN 存 储 网 络 ,数据 的 传输 、 复 制 、 迁 移 、 备 份 等 在 SAN 网 内 高 速 进行 ， 不 需 占用 


业务 网 络 WAN/LAN 的 市 宽 资 源 。 


， 在 SAN 存 储 网 络 环境 下 ， 扩 展 存储 资源 变 得 非常 容易 ， 只 需要 增加 新 的 存储 设备 到 SAN 


存储 网 络 中 即 可 , /实现 平滑 的 扩容 。 新 增 的 存储 资源 可 以 直接 映射 给 应 用 服务 器 使 用 。 


， 由 于 SAN 存 储 网 络 使 用 的 FC 协 议 实现 了 对 SCSI 协 议 的 封装 ， 因 此 可 以 实现 对 以 前 的 各 种 


SCSI 存 储 设备 的 兼容 ， 在 异 构 环境 下 ， 更 能 体现 其 优势 。 


SAN 存 储 的 应 用 


由 于 存储 设备 的 集 
中 部 署 ， 应 用 服务 
器 可 以 实现 低 成 本 
的 数据 存 取 和 共享 


数据 备份 使 用 独立 的 “ 


SAN 网 络 与 业务 网 分 
离 ， 实 现 对 异 构 服 务 
器 和 多 数据 形式 进行 
集中 备份 


存储 资源 在 逻辑 上 被 
分 成 多 个 块 并 分 别 映 
射 给 应 用 服务 器 ， 实 
现存 储 资源 共享 


SAN 网 络 可 采用 多 种 
手段 实现 数据 的 自动 


备份 污 全 旦 出 现 灾难 ， 
可 立即 实现 数据 恢复 。 
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SAN 存 储 网 络 主要 应 用 在 : 
对 响应 时 间 、 可 用 性 和 可 扩展 性 要 求 高 的 关键 任务 数据 库 应 用 。 


对 性 能 、 数 据 完整 性 和 可 靠 性 要 求 高 的 集中 存储 备份 ， 以 保证 关键 数据 的 安全 ， 可 极 大 
地 提高 企业 数据 备份 和 恢复 操作 可 靠 性 和 可 扩展 性 。 


海量 存储 的 应 用 环境 。 例 如 sw 图 书馆 、 银 行 、 证 券 、 中 大 型 企业 或 组 织 的 数据 中 心 。 
支持 服务 器 及 其 连接 设备 之 间 提 供 光 纤 通 道 高 性 能 和 扩展 的 距离 。 
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SAN 与 DAS 的 区 别 


对 存储 容量 要 求 不 高 、 服 务 器 
数量 很 少 的 中 小 型 局 域 网 


部 署 简单 、 投 资 少 


可 扩展 性 差 、 资 源 浪费 、 不 易 
管理 、 性 能 瓶颈 
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行 详细 介绍 





FC 协议 


关键 数据 库 、 集 中 存储 、y 海 量 存 
储 、 备 份 、 容 灾 等 中 高 端 存 储 应 
用 环境 


高 可 用 性 、 高 性 能 激 高 扩展 性 、 
兼容 性 、 集 中 管理 


投资 相对 较 高 


W Huawei 


Ce SAN 存 储 网 络 的 组 网 连接 以 及 FC 协 议 
将 在 下 一 节 进 


SAN 存 储 基 础 


山 


. FC 连接 与 协议 


华为 SAN 存 储 应 用 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. w HUAWEI 





o0 2290 


FC 拓扑 结构 


点 对 点 Arbitrated Loop (仲裁 环 ) 交换 式 Fabric 





只 能 连接 2 个 设备 最 多 支持 127 个 设备 最 多 支持 1 十 6 百 万 个 设备 
(直接 连接 ) (光纤 集线器 ) (光纤 通道 交换 机 ) 
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FC 主要 有 三 种 拓扑 结构 ， 用 以 描述 各 个 节点 的 连接 方式 。 光 纤 通 道 术 语 中 的 “节点 ” 
是 指 通过 网 络 进行 通信 的 任何 实体 ， 而 不 一 定 是 一 个 硬件 节点 。 这 个 节点 通常 是 一 个 设备 ， 
比如 说 一 个 磁盘 存储 器 ， 服 务 器 上 的 一 个 主机 总 线 适 配器 或 者 是 一 个 光纤 网 交换 机 。 


。 点 到 点 式 
两 个 设备 背 对 背 直接 连接 。 这 是 最 简单 的 一 种 拓扑 ， 连 接 能 力 受 限 。 
。 仲裁 环 式 


这 种 设计 方式 中 ， 所 有 设备 连接 在 一 个 类 似 于 令 牌 环 的 环 路 上 。 这 个 环 路 中 添加 或 者 移 
除 一 个 设备 会 导致 环 路 站 所 有 活动 中 断 。 一 个 设备 的 故障 导致 整个 环 路 不 能 进行 工作 。 光 
纤 通 道 集线器 能 够 用 于 将 众多 设备 连接 到 一 起 形成 一 个 逻辑 上 的 环 路 ， 并 且 能 够 旁 路 故障 
节点 ， 使 得 环 上 节点 的 故障 不 会 影响 整个 环 路 的 通信 。 一 个 环 路 也 可 以 通过 使 用 线 缆 直接 
将 节点 一 个 接 一 个 的 连接 成 一 个 环 而 实现 。 最 小 的 环 路 只 包含 两 个 节点 ， 这 种 结构 看 起 来 
和 点 到 点 式 连接 近似 ， 它 们 的 区 别 在 很 大 程度 上 取决 于 各 自 的 协议 。 


。 光纤 交换 式 


所 有 的 设备 或 者 设备 环 都 被 连接 到 光纤 网 交换 机 上 ， 与 现 有 的 以 太 网 的 实现 形式 在 概念 
上 是 类 似 的 。 这 种 拓扑 结构 相对 于 点 到 点 和 仲裁 环 的 优势 在 于 : 


o、 交 换 机 对 结构 形式 进行 管理 ， 提 供 了 最 好 的 互联 形式 。 
o 多 对 节点 可 以 同时 通信 。 
a。 各 个 节点 的 故障 是 孤立 的 ， 不 会 危及 其 他 节点 的 工作 。 
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FC 协议 栈 


8t/10b 编码 
铜 、 光 连 接 
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FC 开 发 于 1988 年 ， 最 早 是 用 来 提高 硬盘 协议 的 传输 带宽 ， 侧 重 于 数据 的 快速 、 高 效 、 
可 靠 传 输 。 到 上 世纪 ?0 年代 末 ，FC-3AN 开 始 得 到 大 规模 的 广泛 应 用 。 光 纤 通 道 的 主要 部 
分 实际 上 是 FC-2。 其 中 从 FC-0 到 FC-2 被 称 为 FC-PH， 也 就 是 “物理 层 ”。 光 纤 通 道 主 要 
通过 FC-2 来 进行 传输 ， 因 此 ， 光 纤 通 道 也 常 被 成 为 “二 层 协 议 ” 或 者 “类 以 太 网 协议 ”。 

光纤 通道 的 数据 单元 叫做 帧 。 即 使 光纤 通道 本 身 就 有 几 个 层 ， 大 部 分 光纤 通道 是 指 第 2 
层 协 议 。 一 个 光纤 通道 帧 最 大 是 2148 字 节 ， 而 且 光 纤 通 道 帧 的 头 部 比 起 广域网 的 IP 和 TCP 
来 说 有 些 奇怪 。 光 线 通道 只 使 用 一 个 帧 格式 来 在 多 个 层 上 完成 各 种 任务 。 帧 的 功能 决定 其 
格式 。 相 上 比 我 们 在 IP 世 界 中 的 概念 ， 光 纤 通 道 帧 格式 是 奇特 而 且 奇 妙 的 。 

光纤 通道 帧 起 始 于 帧 开始 (SOF) 标志 ， 随 后 是 帧 头 部 ， 这 个 一 会 进行 描述 。 数 据 ， 或 
光纤 通道 内 容 ， 紧 随 其 后 , /然后 是 帧 结束 (EOF) 。 这 样 封装 的 目的 是 让 光纤 通道 可 以 在 
需要 时 被 其 他 类 似 于 TCP 的 协议 所 承载 。 

FC-0: 物理 层 ， 定 制 了 不 同 介质 ， 传 输 距 离 ， 信 号 机 制 标准 ， 也 定义 了 光纤 和 铜 线 接口 以 
及 电缆 指标 ; 

FC-1 : /定义 编码 和 解码 的 标准 ; 

FC-2 : 定义 了 帧 、 流 控制 、 和 服务 质量 等 ; 

FG-3 : 定义 了 常用 服务 ， 如 数据 加 密 和 压缩 ; 


FC-4: 协议 映射 层 ， 定 义 了 光纤 通道 和 上 层 应 用 之 间 的 接口 ， 上 层 应 用 比如 : 串 行 SCSl th 
XX, HBA 的 驱动 提供 了 FC-4 的 接口 函数 ，FC-4 支持 多 协议 ， 如 : FCP-SCSI, FC-IP, 
FC-V|。 


0 2310 


FC 与 SCSI 协 议 


FC-0 物理 变换 一 一 


FC-2 结构 协议 ， 


FC-4 SCSI | | 
AN \ 命令 映射 集 / 
N -a 





FC 与 SCSI 协 议 的 关系 : © 
。 FC 通道 并 不 是 SCSI 的 替代 ， rom moon 数据 和 状态 信息 
单元 。 


e SCSl 是 位 于 光纤 通道 协议 栈 FC 慨 协 议 ，SCSI 是 FC 协 议 的 子 集 。 
Q 


S 
& 
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FC 存 储 设备 


。 存储 设备 上 的 FC 接口 模块 提供 了 应 用 服务 器 与 存储 系统 的 业务 接口 ， 
用 于 接收 应 用 服务 器 发 出 的 数据 交换 命令 。 


模块 电源 指示 灯 一 一 上 





FC 主机 端口 


i > 
Ë 


FC 主机 端口 一 一 < 下 
link/speed 指 示 灯 
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8Gb FC 接 口 模 块 提供 传输 速率 为 8Gbits 的 主机 端口 。 当 连接 的 设备 传输 速率 低 于 主机 
端口 速率 时 ， 主 机 端口 将 自动 适应 传输 速率 以 保证 数据 传输 通道 的 连通 性 和 数据 传输 速 
率 的 一 致 性 。 


0 2330 


光纤 交换 机 


。 光纤 网 络 路 由 直接 连接 的 方式 

。 发 起 者 和 目标 设备 建立 直接 的 连接 
。 独 享 光纤 的 所 有 带宽 

。 区 域 Zone 的 划分 
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光纤 通道 交换 机 使 用 光纤 网 络 路 由 直接 连接 的 方式 ， 发 起 者 和 目标 设备 可 以 通过 光纤 通 
道 交 换 机 中 的 路 由 软件 建立 直接 的 连接 以 独 享 光纤 的 所 有 带宽 。 


光纤 通道 交换 机 是 SAN 的 核心 ， 它 连接 着 主机 和 存储 设备 。 一 般 可 分 为 入 门 级 交换 机 、 
工作 组 级 光纤 交换 机 、 核 心 级 光纤 交换 机 。 工 作 组 级 光纤 交换 机 应 用 最 多 的 领域 是 小 型 
SAN， 通 过 级 联 交 换 机 ， 能 够 建立 一 个 大 型 的 、 虚 拟 的 、 具 有 分 布 式 优点 的 交换 机 ， 并 且 
它 可 以 跨越 的 距离 非常 大 。 核 已 级 交换 机 (又 叫 导向 器 ) 一 般 位 于 大 型 SAN 的 中 心 ， 支 持 
光纤 以 外 的 协议 ( 像 InfiniBGnd) 、 高 级 光纤 服务 (例如: 安全 性 、 中 继 线 和 帧 过 滤 等 ) ， 
核心 光纤 交换 机 往往 采用 基于 “刀片 式 ”的 热 插 拔 电路 板 。 

与 以 太 网 交换 机 相 比 半 FC 交 换 机 用 于 构建 光纤 网 络 ， 而 以 太 网 交换 机 用 于 构建 以 太 网 络 ; 
光纤 交换 机 中 使 用 的 是 FC 协议 ， 以 太 网 交换 机 使 用 的 是 TCP/IP 协 议 。 

光纤 交换 机 上 为 了 不 同 设备 之 间 的 访问 隔离 引入 了 zone 的 概念 ，zone 的 功能 类 似 于 以 
太 网 交换 机 上 的 VDAN 功 能 ， 它 是 将 连接 在 SAN 网 络 中 的 设备 (主机 和 存储 ) ， 逻 辑 上 划 
到 为 不 同 的 区 域内 ， 使 得 不 同 区 域 中 的 设备 相互 间 不 能 通过 FC 网 络 直接 访问 ， 从 而 实现 网 
络 中 的 设备 之 间 的 相互 隔离 。 
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FC3E HAT im D 


司 一 TP 


节点 NPort $ F_Port F_Port == N_Port 节点 


fs 
W 


FL_Port Men Port 节点 


FL_Port “= FL_Port 


FL_Port — NL_Port 
Fc 交换 机 2 pA 节点 


FC 集线器 a 
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光纤 网 交换 机 中 具有 一 些 称 为 端口 (Por) 的 连接 部 件 ， 不 同 的 端口 根据 其 所 连接 的 设 
备 类 型 ， 所 起 到 的 作用 是 不 同 的 。 光 纤 通 道 标准 定义 了 以 下 端口 : 
e F_Port 


F 端 口 也 被 称 为 光纤 网 端口 ， 用 于 将 服务 器 和 存储 设备 连接 到 交换 机 上 。 一 个 被 连接 到 
交换 机 F 端 口 的 设备 就 是 一 个 节点 Node) ， 用 光纤 通道 术语 来 说 ， 它 被 看 作 是 一 个 N 端 
口 〈N_Por) 。 如 果 是 在 仲裁 环 路 拓扑 结构 中 ， 则 被 称 为 NL 端口 (NL_Port) 。 交 换 机 通 
过 特定 的 N 端 口 或 者 是 NL 端 生 名称 来 识别 这 些 光纤 通道 节点 。 


e E Port 
E 端 口 也 被 称 为 扩展 端口 y 被 用 于 进行 交换 机 之 间 的 连接 。 
e FL Port 


FC 交换 机 的 一 个 交换 端口 可 以 作为 环 路 的 组 成 部 分 ， 数 据 可 以 从 交换 机 中 传输 到 环 上 。 
在 环 路 环境 下 正常 工作 的 一 个 交换 端口 称 之 为 “FL_port”。 

e G Port: 通用 端口 G 端 口 

G 端 口 是 一 种 通用 的 端口 ， 根 据 具 体 的 实现 方案 ， 可 以 作为 [端口 或 是 E 端 口 使 用 ， 也 就 
意味 着 G 端 口 实 际 上 可 以 被 用 作 两 种 端口 功能 的 组 合 。 由 于 G 端 口 的 自 适 应 性 ， 在 进行 
FC-SAN 的 多 交换 机 配置 环境 时 ，G 端 口 为 交换 机 提供 了 更 好 的 灵活 性 并 降低 了 每 个 端口 
所 耗费 的 管理 成 本 。 


目前 光纤 交换 机 支持 的 端口 速率 有 1 、2、4、8 Gb/s 。 
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GBIC 封 装 


SFP 封 装 
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光 通 道 交换 机 光 模 块 由 光电 子 器 件 、 功 能 电路 和 光 接 口 等 组 成 。 光 电子 器 件 包 括 发 射 和 
接收 两 部 分 。 


。 按照 速率 分 : 以 太 网 应 用 的 100Bese“《 百 兆 ) 、1000Base (+3K) ~ 10GE SDH 应 
用 的 155M、622M、2.5G、10G 


。 按照 封装 分 : 1X9、SFF、SFR_GBIC、XENPAK、XFP， 
。 按照 光纤 的 类 型 分 : 单 模 光纤 连接 器 、 多 模 光 纤 连接 器 ; 


。 按照 光纤 连接 器 的 连接 头 形式 分 : FC, SC, ST, LC, MU, MIRI 等 等 ， 目 前 常用 
的 有 FC,，SC,， SF, LC. 


在 华为 存储 设备 中 ,~ 采用 多 模 的 LC 连接 器 。 


236 [] 


常用 光纤 连接 介质 


介质 类 型 发 射 器 速率 
1Gb/s 
2Gb/s 
9hm 单 模 光 纤 1Gb/s 
1300nm 长 波光 激光 器 一 GPR 
4Gb/s 
1Gb/s 
50hm 多 模 光 纤 2Gb/s 
850nm 短 波光 激光 器 | 4Gb/s _ 
1Gb/§ 
62.5hm 多 模 光 纤 2Gb/S 
4Gb/§ 


1550nm 长 波光 激光 器 
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。 按照 光纤 的 模式 分 类 : 
单 模 光纤 (Single Mode Fiber) 
a 多 模 光 纤 (Multi Mode Fiber) 


距离 
2m—50Km 


2m— 50Km 
2m-10 (m 月 
2m - 2Km 


2m =2Km 
0.5m-500m 


.( 0:5m-300m 


0.5m-170m 
0.5m-300m 
0.5m-150m 
0.5m-70m 


W Huawei 
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HBA 卡 


ə HBA (Host Bus Adapter) : 
o 主机 总 线 适 配器 ， 就 是 连接 主机 MO 
总 线 和 计算 机 内 存 系统 的 MO 适配器 。 
分 类 : 
o FC HBA, SCSI HBA, SAS HBA、 
iSCSI HBA 等 。 


H: 


o 用 于 服务 器 、 海 量 存储 子 网 络 、 外 
设 间 通过 集线器 、 交 换 机 和 点 对 点 
连接 进行 双向 、 串 行 数据 通讯 。 
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FC HBA 卡 是 联系 服务 器 与 存储 区 域 网 络 的 设备 。 与 网 络 接口 卡 (Network Interface 
Card, NIC) 类 似 ，HBA 提 供 了 服务 器 协议 和 光纤 网 络 交换 机 之 间 进 行 转换 的 能 力 。HBA 
连接 到 服务 器 的 PCI 总 线 ， 通 过 软件 驱动 程序 来 提供 对 光纤 通道 网 络 的 支持 。HBA 根 据 厂 
商 的 实现 ， 可 以 使 用 单 端口 或 者 多 端口 配置 。 在 多 端口 环境 中 ， 数 据 流 拥有 额外 的 数据 路 
径 ， 用 于 通过 单个 HBA 在 服务 器 和 光纤 网 交换 机 之 间 传 输 数 据 。 一 个 HBA 可 以 拥有 多 个 端 
口 ， 而 一 个 服务 器 也 可 以 使 用 多 个 HBA ， 这 样 的 配置 更 具 灵 活性 ， 可 以 实现 到 多 个 连 节 点 
的 单独 连接 ， 也 能 实现 到 同志 和 连 节点 的 路 径 匈 余 以 避免 单 点 故障 的 风险 。 

FC HBA 的 主要 厂家 有 Emulex、Qlogic、LSI、JNI (已 经 并 入 AMCC ，LSI 存 储 兼 容 列 
RS HIHBAWAMCC}\ Agilent, Adaptec. 、IBM、HP、SUN。 
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FC HBA 卡 WWN 


e WWNN (World Wide Node Name) 
e WWPN (World Wide Port Name) 
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FC HBA 的 WWN 具 有 两 种 类 型 : 

e WWNN (World Wide Node Name) 

全 球 唯 一 节点 名 字 ， 由 光纤 通道 进行 映射 的 分 配给 每 一 个 上 层 节点 一 个 全 球 惟一 的 64 
位 标识 符 ， 一 个 HBA 上 的 所 有 端口 共享 一 个 WWNN。 在 计算 机 处 理 中 ， 一 个 WWNN 被 分 
配给 一 个 接 入 到 光纤 网 中 的 节点 (二 个 端点 ， 如 ， 一 个 设备 ) 。WWNN 可 以 被 一 个 或 者 
多 个 不 同 的 端口 (每 个 端口 拥有 不 同 的 NWPN， 并 且 属 于 同一 个 节点 ) 共同 使 用 。 

e WWPN (World Wide PoriName) 

全 球 惟一 端口 名 字 人 分 配给 每 一 个 光纤 通道 端口 的 全 球 惟 一 的 64 位 标示 符 ， 每 个 
WWPN 被 该 端口 独 享 &、WWPN 在 存储 区 域 网 络 中 的 应 用 就 等 同 于 MAC 地 址 在 以 太 网 协议 
中 的 应 用 。 
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FC 交 换 机 Zone 概念 


。 Zone 是 可 进行 互通 的 端口 或 设备 的 名 称 构成 的 集合 
。 在 一 个 zone 里 的 设备 只 能 与 同一 个 zone 中 的 其 他 设备 通信 
。 一 个 设备 可 以 同时 在 多 个 zone 里 
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e Basic Zones: (基本 分 区 ) 
o 设置 基本 分 区 ， 控 制 各 设备 或 端 因 之 间 的 访问 权限 。 
e Traffic Isolation Zones: (流量 隔离 分 区 ) 


o 当 存 在 多 条 ISL 级 联 链 路 (SRE Port) 时 ， 用 于 指定 某 条 ISL 链 路 只 负责 传送 与 访 
链 路 FE_Por 在 同一 Zone 内 的 端口 的 流量 。 
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FC 交 换 机 Zone 基本 配置 


Manage View | Configure | Montor Reports Ioots 





在 Web Tools 主 界面 上 选择 
Configure->Zone Admin， 进 
入 zone Administration. 











匠 10.158.181.182 - SNS2124 - Zone Administration 





Basic Zones Pit ER Yow 





Traffic Isolation Zones Cl New v | oosa zane ontgin PS enanada 


「 Aias fzo 


I Save Config 
| ear an 





orts & Attached Devices(2 
© E wwNs (4 Devices) 


+: Zone 配置 以 JN32124 为 例 
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。 设置 默认 Zone 模式 : 
1. 打开 “Zone Administration” 页 面 。 


2， 选 择 “Zoning Actions > Set Default Mode” ， 选 中 All Access, 人 允许 Fabric 内 
所 有 设备 可 以 相互 访问 。 
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创建 Alias 


Ry Refresh v 


[E [=] Ports & Attached Devices(50 Members) 
E  1(SNS2248)(48 Ports) 

上 日 加 vmws (2 Devices) 
E À, Emulex Corporation 20:00:00:00:c9:87:17:c3 
9 © 28] "HUAVVEI S3900-M20 2105" 21:00:00 


Step 3 


Eee oen 


Delete | Rename 


a -r 
Alias Members lC 
1 Member. 


1 ,0(portOF:Port PID: 010000) 





Step 2 i>i] 
+4 
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创建 Alias 的 主要 步骤 : 
点 击 “New Alias”， 在 弹出 的 对 话 框 中 ， 输 入 名 字 ， 点 击 “OK?” 
Æ “Member Selection Lis” 中 选择 需要 加 入 Alias 的 端口 ， 点击 D, 


l. 
2. 


加 入 Alias Members; 
选择 “Sove Configas, REME. 





创建 Zone 


Resource View v 


y Refresh v 


Step 1 


|[ 回 a Ports & Attached Devices(50 Members) 
日 ©] wwNs (2 Devices) 


© @ [28] "HUAWEI S3900-M200 2105" 21:00:00:22-a1:09:c8:28 


© E Aiases(1 Members) 


dái 


New Zone 


Step 3 


Enable Config | Save Config Clear All 


a.“ 


Zone Members 


LO- 


日 [E] Switch Péits(2 Ports) 
1 ,poRO F Port PID: 010000) 
T'Aport1 F-Port PID: 010100) 


Delete | Rename! Clone 


Step 2 [>] 
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创建 Zone 的 主要 步 又: 


W Huawei 





1. At “NewZone” ， 在 弹出 的 对 话 框 中 ， 输 入 名 字 ， 点 击 “OK” 
2. 在 “Member Selection List” 中 选择 需要 加 入 Zone 的 端口 ,点击 才 ， 


加 入 Zone Members; 


3. 选择 “Sqve Config’, 保存 配置 。 


0 20 


创建 并 激活 Zone Config 


Basic Zones 


Print Edt View Zoning Actions Step 4 Step 3 
E New ~ Resource View ~ »Refresh v Save Config | Clear Al 
Aias | Zone Zone Contig | 


Step 1 
-r | EE 


Member Selection List Zone Config Mers. "0 
日 E Zones (2 Zones) | 1 Zone. 


器 y [E] vanzi Dx 
Step 2| 
ia, 





a 
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。 创建 Zone Config 的 主要 步骤 : 


1， 点 击 “New Zone Config”， 在 弹出 的 对 话 框 中 ， 输 入 名 字 ， 点 击 “OK” ; 
2. Æ “Member Selection Lisf” 中 选择 需要 配置 的 zone， 上 点击 
3. 选择 “Save Config” ， 保 存 配 置 。 > 
4. 选择 “Enable Config”, MERE. 


创建 Zone Config 后 需要 为 Zone Config 命 名 。 
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© 目录 


DAS 存 储 基础 
SC9| 协 议 介 绍 
SAN 存 储 基础 
FC 连 接 与 协议 


华为 SAN 存 储 应 用 
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SAN、NAS 统 一 存储 
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华为 1 系列 存储 设备 实现 了 SAN 和 NAS 的 统一 3 满足 用 户 对 SAN 存 储 和 NAS 存 储 应 用 需 
求 。 其 主要 应 用 场景 为 用 户 有 FC SAN, AP SAN, 及 NAS 统 一 存储 需求 。T 系 列 存储 设备 主 
要 的 优势 包括 : 


o 用 户 不 用 去 单独 规划 SAN 和 NAS 的 存储 容量 

o 用 户 可 以 自由 分 配 存 储 来 满 司 应 用 环境 的 需要 

o 用 户 不 用 关心 对 数据 块 及 文件 存储 容量 利用 率 的 问题 
注 : IP SAN 和 NAS 相 关内 容 将 在 后 面 章节 详细 介绍 。 
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华为 FC-SAN 组 网 应 用 一 一 S2600T 


| 


FC HBAR 


FC 交换 机 1 


FC 交换 机 2 





华为 S2600T 系 列 存储 阵列 设备 可 以 通过 光纤 将 控制 框 FC 主机 端口 与 应 用 服务 器 端口 进 
行 连接 ， 建 立业 务 通道 ， 实 现存 储 设备 与 应 用 服务 器 之 间 的 通信 。 


存储 设备 与 应 用 服务 器 的 连接 方式 有 两 种 : 直接 连接 和 通过 FC 光纤 交换 机 连接 。 
通过 FC 光纤 交换 机 连接 时 ， 需 要 提前 做 好 以 下 规划 : 
o 规划 交换 机 Zone 划 分 确定 划分 的 Zone 对 应 的 交换 机 端口 。 


o 交换 机 的 首尾 端口 常用 于 交换 机 之 间 的 组 网 ， 不 建议 用 于 主机 服务 器 与 存储 阵列 
的 连接 。 


0 270 


华为 FC-SAN 组 网 应 用 一 一 S5500T 


应 用 服务 器 


FC 交换 机 1 
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华为 955500T 存 储 阵 列 设备 控制 框 可 以 通过 8Gb*FC 主 机 端口 连接 到 应 用 服务 器 。 


与 32600T 存 储 设备 一 样 ，S5500T 存 储 阵列 与 应 用 服务 器 的 连接 方式 有 两 种 : ”直接 连接 
和 通过 FC 光 纤 交 换 机 连接 。 同 样 ， 通 地 FC 光 纤 交 换 机 连接 时 ， 需 要 提前 做 好 交换 机 zone 
规划 。 


0 2480 


华为 FC-SAN 组 网 应 用 一 一 S5600T 


应 用 服务 器 À PAGE 


y 
FC 交 换 机 1 


FC 交换 机 2 





S5600T 
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华为 955600T 存 储 阵 列 设备 控制 框 为 4U 盘 控 分 离 设 计 ， 可 以 通过 8Gb FC 主机 端口 连接 到 
应 用 服务 器 。 控 制 框 上 的 接口 模块 都 是 宛 余 配置 ， 因 此 ， 建 议 将 控制 框 宛 余 连接 至 应 用 服 
务 器 。 

与 52600T 存 储 设备 一 样 ， S5600T 存 储 阵列 设备 与 应 用 服务 器 的 连接 方式 有 两 种 : 直接 
连接 和 通过 FC 光纤 交换 机 连接 。 同 样 ” 通 过 FC 光纤 交换 机 连接 时 ， 需 要 提前 做 好 交换 机 
zone 规划 。 
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硬盘 框 级 联 一 一 S2600T/S5500T 
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华为 1 系列 存储 设备 可 通过 mini SAS 线 缆 实 现 控制 框 与 硬盘 框 以 及 硬盘 框 之 间 的 级 联 。 
级 联 硬盘 框 时 ， 应 采用 正 反 向 匈 余 连接 的 方式 。 正 向 连接 和 反 向 连接 的 描述 如 下 : 


口 


正 向 连接 : 假设 控制 框 级 联 了 从 2、3 三 个 硬盘 框 ， 控 制 器 A 上 的 级 联 端口 连接 1 
号 硬盘 框 级 联 模块 A 上 的 PRI 级 联 端 口 ，1 号 硬盘 框 级 联 模块 A 上 的 EXP 级 联 端 口 又 
连接 2 号 硬盘 框 级 联 模块 人生 的 PRI 级 联 端口 。 以 此 类 推 ， 将 控制 器 A 和 所 有 硬盘 框 
级 联 模块 A 上 的 级 联 端口 依次 连接 的 方法 称 为 正 向 连接 。 

反 向 连接 : 假设 控制 框 级 联 了 1、2、3 三 个 硬盘 框 ， 且 控制 器 A 和 所 有 硬盘 框 级 联 
模块 A 上 的 级 联 端口 依次 正 向 连接 。 控 制 器 B 上 的 级 联 端口 连接 3 号 硬盘 框 级 联 模 
块 B 上 的 PRI 级 联 端口 ，3 号 硬盘 框 级 联 模块 B 上 的 EXP 级 联 端口 又 连接 2 号 硬盘 框 级 
联 模块 B 上 的 PRI 级 联 端 口 。 以 此 类 推 ， 将 控制 框 B 和 所 有 硬盘 框 级 联 模块 B 上 的 级 
联 端口 依次 连接 的 方法 称 为 反 向 连接 。 


级 联 硬盘 框 之 前 ， 需 要 遵循 下 面 的 级 联 规则 进行 连接 : 


口 


[z] 


存储 设备 上 的 所 有 EXP 级 联 端口 只 能 与 PRI 级 联 端口 相连 。 


如 果 级 联 两 个 或 两 个 以 上 数量 的 硬盘 框 ， 建 议 根据 控制 框 上 级 联 端口 的 数量 组 建 
多 个 级 联 环 路 ， 每 个 级 联 环 路 上 的 硬盘 框 数 量 尽 量 保持 一 致 。 


保险 箱 所 在 的 硬盘 框 需 正 向 连接 。 
保险 箱 盘 所 在 的 框 必须 接 在 0 环 路 上 (〈 即 控制 框 0 号 槽 位 的 SAS 卡 的 PO 口 上 ) o 


硬盘 框 级 联 一 一 S5600T/S6800T 





= ile 


硬盘 框 1 
( 带 保险 箱 盘 ) 


硬盘 框 2 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 47 w HUAWEI 





0 2510 


华为 FC-SAN 管理 网 口 组 网 








CEE ) 
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华为 存储 设备 可 以 通过 网 线 将 控制 框 管理 网 月 与 维护 终端 网 口 进行 连接 ， 建 立 管理 通道 
， 实 现 维护 终端 对 存储 设备 的 管理 和 维护 。 每 个 控制 器 上 都 设置 有 一 个 管理 网 口 和 维护 网 
口 。 维 护 网 口 用 于 紧急 情况 下 的 特殊 维护 ， 因 此 一 般 只 使 用 管理 网 口 来 进行 配置 管理 。 


存储 设备 与 维护 终端 的 连接 方式 有 两 种 : 
o 直接 连接 。 
o 通过 以 太 网 交换 机 连接 
通过 以 太 网 交换 机 连接 方式 时 ， 需 要 保持 管理 终端 与 存储 阵列 设备 管理 网 口 间 的 通讯 正 
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华为 FC-SAN 串 口 管理 组 网 











32600T 
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华为 [系列 存储 设备 的 串口 和 维护 终端 之 间 通 过 串口 线 缆 连 接 后 ， 可 以 通过 串口 对 存储 
系统 进行 管理 和 维护 。 有 两 种 端口 类 型 的 串口 线 缆 : RJ-45 转 DB9 串 口 线 绕 和 双 RJ-45 上 串口 线 
缆 。 两 种 类 型 串口 线 缆 的 选用 视 维 护 终 端的 串口 类 型 而 定 。 一 般 而 言 ， 存 储 系统 通过 RJ-45 
转 DB9 串 口 线 缆 连 接 。 
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DAS 存 储 基础 知识 
SCSI| 协 议 

SAN 存 储 的 基础 知识 
FC 连接 和 协议 封装 
华为 SAN 存 储 的 应 用 
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思考 是 


DAs 存 储 的 局 限 性 有 哪些 ? 

如 何 描述 5CSI 协 议 模型 ? SCSI 协 议 如 何 实 现 寻 址 操作 ? 
SAN 存 储 典型 组 网 有 哪 几 种 ? 各 自 的 组 网 特点 是 什么 ? 
SAN 存 储 网 络 由 哪 几 个 主要 组 件 组 成 ? 

FC 主要 的 拓扑 结构 包括 哪 几 种 ?各 自 有 什么 特点 ? 
FC 协议 分 为 几 层 ， 各 层 的 主要 功能 和 特性 是 什么 ? 与 SG 协议 的 关 
系 是 什么 ? 

华为 SAN 存 储 设备 有 哪些 应 用 组 网 ， 如 何 实现 组 网 连接 ? 


xX 
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。 判断 题 


1. SCSI 采取 了 分 层 结构 ， 主 要 包括 三 层 ， 即 SCSI 应 用 层 ，SCSI 传 输 层 和 SCSI 互 连 层 。 
(Tof F) 


。 多 选 题 以 
1. FC 光纤 交换 机 包括 的 主要 端口 类 型 是 : 


A. F_Port 
B. N_Port 
C. E Port 
D. G Port 
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习题 答案 : 
o 判断 题 : 1.T 


o 多 选 题 : 1.ACD 
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目标 


。 学 习 完 本 章节 后 ， 您 将 能 够 : 
TEIP SAN 产 生 与 发 展 的 背景 
掌握 IP SAN 组 成 和 组 网 连接 
理解 SC5I 协 议 
理解 FC 协议 与 TCP 协 议 融 合 
掌握 华为 |P SAN 存 储 的 实现 与 应 用 
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. IP SAN 产 生 与 发 展 
IP SAN 组 成 和 组 网 连接 
iSCSI 协议 介绍 
FC 协 议 与 TCP 协 议 融合 


华为 IP SAN 存 储 的 实现 与 应 用 
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FC SANSIP SAN 











FC SAN 


39 
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前 面 介 绍 了 基于 FC 协 议 的 FC SAN, TEVATITÉÉE, NREM RERA 
高 要 求 的 中 高 端 存储 需求 。 由 于 其 高 昂 的 价格 s 技术 和 配置 复杂 、 有 限 的 传输 距离 、 不 同 
厂商 设备 互联 共享 等 问题 ， 也 限制 了 其 使 用 的 范围 。 为 了 提高 SAN 的 普及 程度 和 应 用 范围 ， 
并 充分 利用 SAN 本 身 所 具备 的 架构 优势 ,SAN 的 发 展 方向 开始 考虑 和 已 经 普及 的 并 且 相对 
廉价 的 IP 网 络 进行 融合 。 

基于 TCP/IP 协 议 的 以 太 网 的 IP-SAN 存 储 开始 进入 人 们 的 视野 ， 并 得 到 了 网 络 厂商 的 广 
泛 支 持 。 与 基于 光纤 通道 技术 的 FC-SAN 相 比较 而 言 ，IP-SAN 存 储 系统 具有 节约 大 量 成 本 、 
加 快 实施 速度 、 优 化 可 靠 性 以 及 增强 扩展 能 力 等 优点 。 

简单 而 言 ，IP SAN 存 储 就 是 使 用 IP 网 络 而 不 使 用 光纤 网 络 来 做 服务 器 和 存储 设备 的 连 
接 技术 。IP SAN 存 储 是 基于 IP 网 络 来 实现 块 级 数据 存储 的 方式 。 目 前 除了 标准 已 获 通 过 的 
iSCSI1， 还 有 FCIP、YFECP 等 标准 。 其 中 SC3I 发 展 最 为 迅速 ， 已 经 成 为 |P 存 储 的 中 流 丰 柱 。 
基于 iSCSI 的 SAN 的 目的 就 是 要 使 用 本 地 iSCSI Initiator (启动 器 ， 通 常 为 服务 器 ) 通过 IP 网 
络 和 i9CslTorgef 〈 目 标 器 ， 通 常 为 存储 设备 ) 来 建立 SAN 网 络 。 
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什么 是 IP SAN? 


。 以 TCP/IP 协 议 为 底层 传输 协议 ， 采 用 以 太 网 作为 承载 介质 构建 起 来 的 存储 
区 域 网 络 架构 。 
实现 IP-SAN 的 典型 协议 是 iSCSI， 它 定义 了 SCSI 指 令 集 在 IP 中 传输 的 封装 廊 


En Ere En ~ 


LAN 
< 服务 器 < 服务 器 
HBA HBA 


TCP/IP 网 络 以 太 网 交换 机 


存储 设备 存储 设备 
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IP SAN 是 标准 的 TCP/P 协 议和 SC3I 指 令 集 相 结合 的 产物 ， 以 其 协议 标准 化 、 整 体 成 本 
低廉 和 维护 简便 等 优势 成 为 网 络 存储 领域 的 重要 产品 形态 。 


IP SAN 是 基于 IP 网 络 来 实现 数据 块 传输 的 网 络 存储 形态 ， 与 传统 FC SAN 的 最 大 区 别 在 于 
传输 协议 和 传输 介质 的 不 同 。 目 前 常见 的 IP SAN 协 议 有 iSCSI、FCIP、iFCP 等 ， 其 中 iSCSIl 是 
发 展 最 快 的 协议 标准 ， 大 多 时 候 人 们 所 说 的 IP SAN 就 是 指 基于 iSCSI 实现 的 SAN。 

IP SAN 把 SCSI 指 令 集 封 装 在 RLEP/IP 上 。 这 就 好 比 ， 不 管 我 们 是 选择 哪 家 快递 公司 ， 
最 终 都 是 把 我 们 想 要 发 送 的 东西 发 送 至 目的 地 ， 都 是 由 我 们 发 起 寄 送 请 求 ， 快 递 公司 进行 
响应 ， 差 别 只 在 于 快递 公司 不 同 而 已 。iSCSI 则 是 全 新 建立 在 TCP/IP 和 SCSI 指 令 集 的 基础 
上 的 标准 协议 ， 所 以 其 开放 性 和 扩展 性 更 好 。 这 也 是 其 大 行 其 道 的 原因 。 


0 


265 [ 


IP SAN 的 优势 





不 需要 专用 的 HBA 卡 和 光纤 交换 机 ， 普 
PNUD IAA SLR D 
储 和 服务 器 的 连接 。 


] 理论 上 IP 网 络 可 达 的 地 方 就 可 以 使 用 “二 SA 
ut LU 0 二 SAN， 而 IP 网 络 是 目前 地 球 上 应 用 最 为 广 
泛 的 网 络 。 


D) 广大 的 具备 IP 网 络 技术 的 维护 人 员 和 强 关 
DEESSA 的 IP 网 络 维护 工具 支撑 。 














PET RTE] 庙 口 带 亮 扩展 到 10Gb 已 经 是 发 展 的 必然 


| 随 着 10Gb 以 太 网 的 迅速 发 展 sus.) 
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IP SAN 主 要 基于 iSCSI 实现 。iSC3SI 协 议 是 建立 在 TCP/IP 协 议和 SCs| 指 令 集 的 基础 之 上 的 
标准 化 协议 。 正 是 其 优良 的 基因 决定 了 其 巨大 的 优势 。 


那么 ，TCP/IP 和 SCSI 有 什么 优势 呢 ? 
第 一 ， 它 们 都 是 标准 化 协议 ， 所 以 有 大 量 的 标准 化 设备 可 供 采用 
第 二 ， 它 们 都 是 已 经 发 展 多 年 的 底 熟 性 协议 ， 具 有 广泛 的 群众 基础 ; 
第 三 ， 作 为 标准 在 各 类 软 竹 硬件 开发 中 已 经 广泛 采用 。 


IP SAN 全 盘 继承 了 父母 的 优良 基因 ， 从 而 具备 了 很 多 方面 的 优势 。 通 过 这 些 优势 ， 给 客 
户 带 来 了 哪些 好 处 呢 ? 最 重要 的 一 点 就 是 IP SAN 总体 拥有 成 本 (TCO) 低 ， 非 常 有 利于 其 
广泛 的 应 用 和 推广 。 和 总 体 拥 有 成 本 (TCO) 是 包含 很 多 内 容 的 ， 比 如 建设 一 个 存储 系统 ， 
则 需要 购买 磁盘 阵列 、 接 入 设备 (HBA 和 交换 机 ) 、 需 要 人 员 培 训 、 日 常 维 护 、 后 续 扩容 、 
容 灾 扩展 等 。IP SAN 因 为 IP 网 络 的 广泛 应 用 优势 ， 可 以 大 幅 降 低 单 次 采购 的 接 入 设备 采购 
成 本 、 减 少 维护 成 本 ， 而 且 后 续 扩容 和 网 络 扩 展 成 本 也 大 幅 降 低 。 
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IP SAN 面 临 的 挑战 


。 ”数据 安全 性 
ep 数据 在 传输 过 程 的 安全 性 和 在 存储 设备 中 的 安全 
性 是 IP SAN 存 储 面临 的 严峻 问题 人 


IPSAN TCP 负 载 


主要 挑战 w 


块 数据 传输 
me IPHNXELBSE RÉ A EAS 
据 的 传输 的 效率 还 有 待 提高 


一 
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尽管 |P 存 储 标准 早已 建立 且 应 用 ， 但 是 将 其 真正 广泛 应 用 到 存储 环境 中 还 需要 解决 几 个 
关键 问题 : 

数据 安全 性 : 企业 网 络 中 最 重要 的 还 是 数据 ， 所 以 ，SAN 中 保存 的 数据 的 安全 性 和 可 靠 
性 应 当 受 到 格外 的 重视 。 传 统 的 FC-SAN 由 于 FC 网 络 的 异 构 性 ， 和 传统 的 业务 IP 网 络 从 物 
理 上 隔离 ， 从 而 保证 了 在 SAN 中 传输 和 存储 的 数据 安全 性 。 然 而 ， 当 存储 设备 通过 IP 架 构 
进行 远程 连接 时 ， 尽 管 IP 协 议 可 以 应 用 IPSec 以 保障 数据 的 安全 性 ， 但 也 只 能 提供 数据 在 
网 络 传输 过 程 的 动态 安全 性 美 并 不 能 保证 数据 被 保存 在 存储 设备 上 的 静态 安全 性 。 由 于 IP 
网 络 是 开放 式 网 络 ， 仍 然 存 在 众多 安全 漏洞 ， 并 且 ， 使 用 IP 网 络 构建 的 IP-SAN 和 传统 的 IP 
业务 很 难 从 物理 上 完全 隔离 。 所 以 ， 提 高 数据 在 传输 过 程 的 安全 性 和 在 存储 设备 中 的 安全 
性 是 IP 存 储 面临 的 严峻 问题 s 


TCP 负 载 空闲 引擎 : 由 于 IP 协 议 是 无 连接 不 可 靠 的 传输 协议 ， 数 据 的 可 靠 性 和 完整 性 是 
由 TCP 协 议 来 提供 的 。/ 而 TCP 为 了 完成 数据 的 排序 工作 需要 占用 较 多 的 主机 CPU 资 源 导 致 
用 户 业 务 处 理 延 迟 的 增加 。 所 以 ，iSC3SI 可 以 采用 一 种 被 称 为 TCP 印 载 引 擎 (TCP Off- 
loading Engine, TOE) 的 设备 ， 将 原本 需要 由 CPU 处 理 完成 的 TCP 封 装 和 人 解 封装 过 程 下 
移 至 TOE 网 卡 完成 ,使 CPU 更 专注 于 用 户 事务 请 求 处 理 和 数据 包 本 身 的 处 理 ， 可 以 有 效 的 
降低 主机 CPU 的 负载 ， 从 而 提升 CPU 的 处 理性 能 。 


块 数据 传输 问题 : FC 存储 协议 具有 速率 高 、 延 迟 低 的 特点 ， 适 合 传输 大 块 的 数据 
(Block Data) ; 而 从 网 络 协议 上 来 看 ，IP 协 议 传输 速率 相对 较 低 、 延 迟 较 高 ， 比 较 适 合 
传输 大 量 的 小 块 消息 。 并 且 ，FC 在 传输 数据 时 将 数据 封装 为 2K 左 右 的 数据 帧 进行 传输 ， 
而 以 太 网 则 将 数据 封装 为 1.5K 的 数据 包 在 IP 网 络 中 进行 传递 ， 所 以 |P 协 议 对 大 块 数据 的 传 
输 的 效率 还 有 待 提高 。 
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FC SAN 


性 能 


与 |P SAN 比 较 


1Gb、2Gb、4Gb、8Gb 
单独 建设 光纤 网 络 和 HBA 卡 
受到 光纤 传输 距离 的 限制 
技术 和 管理 较 复 杂 

兼容 性 差 

非常 高 的 传输 和 读 写 性 能 


购买 (光纤 交换 机 、HBA 卡 、 光 纤 
磁盘 阵列 等 ) 、 维 护 (培训 人 员 、 
系统 设置 与 监测 等 ) 成 本 高 


1Gb、10Gb 

使 用 现 有 IP 网 络 * | 
理论 上 没有 距离 限制 (7 } 
与 |P 设 备 一 样 操作 简单 As | 
与 所 有 IP 网 络 设备 都 兼 窒 ( 和 | 
目前 主流 1Gb，10Gb 正 在 发 展 


与 FC - SAN 相 比 , 购买 与 维护 成 
高 的 投资 收益 比例 





容 灾 的 硬件 、 软 件 成 本 高 


本 都 较 低 ， 
#4 TL 地 和 异地 容 灾 ， 且 


成 本 低 





较 高 
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IP SAN 产 生 与 发 展 
.IP SAN 组 成 和 组 网 连接 

iscsl 协 议 介绍 

FC 协 议 与 TCP 协 议 融合 
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IP-SAN 典 型 组 网 


直 连 


存储 设备 存储 设备 
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@ 直 连 : 


o 主机 与 存储 之 间 直 接 通 过 以 太 网 卡 、NTOE 卡 或 SCSIl HBA 卡 连接 ， 这 种 组 网 方式 简单 、 
经 济 ， 但 较 多 的 主机 分 享 存储 资源 比较 困难 ; 


。 单 交换 : 
。 主机 与 存储 之 间 由 一 台 以 太 网 变换 机 ， 同 时 主机 安装 以 太 网 卡 或 17OE 卡 或 ISCSI HBA 
卡 实现 连接 。 这 种 组 网 结 梅 使 多 台 主 机 能 共同 分 享 同一 台 存 储 设备 ， 扩 展 性 强 ， 但 


交换 机 处 存在 间 点 故障 ， 
。 双 交 换 : 
o 同一 台 主 机 到 存储 阵列 端 可 由 多 条 路 径 连 接 ， 扩 展 性 强 ， 和 避免 了 在 以 太 网 交换 机 处 
形成 单 点 故障 3 


270 [] 


IP-SAN 的 组 件 


J g 


FRA 用 户 B 
以 太 网 卡 以 太 网 卡 


iSCSI 存 储 设备 
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a E aa 由 于 设置 配置 的 技术 简单 、 供 成 本 的 特色 相当 明 
显 ， 而 且 普 通 服务 器 或 PC 机 只 需要 具备 网 卡 淮 即 可 共 
se 所 以 能 容纳 所 有 IP 协 议 网 络 中 的 部 件 。 用 户 可 以 在 任何 需要 的 地 方 创建 


了 了 


服务 器 服务 器 
以 太 网 卡 iSCSI uN 


iSCSI 存 储 设备 





< 享 和 使 用 大 容量 的 存储 空 


由 于 


实际 的 SAN 网 络 ， 而 不 需要 专门 的 光纤 通道 网 络 在 服务 器 和 存储 设备 之 间 传 送 数据 。 同 时 ， 


为 没有 光纤 通道 对 传输 距离 的 限制 


一 个 非常 好 的 选择 。 
IP-SAN 的 组 成 部 分 : 
。 iSCSl 存 储 设备 
。 以 太 网 交换 机 
。 以 太 网 卡 和 iscsiinifiafor 软 件 
。 以 太 网 网 线 


IP-SAN 使 用 标准 的 TCP/IP 协 议 ， 数 据 即 可 在 以 太 网 
上 进行 传输 。IP-SAN 网 络 对 于 那些 要 求 流量 不 太 高 的 应 用 场合 以 及 预算 不 充足 的 用 户 ， 是 


0 
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iSCSI 连接 方式 


。 IP-SAN 根 据 主 机 与 存储 的 连接 方式 不 同 ， 可 以 分 为 三 种 : 


P p Wm 


以 太 网 卡 硬件 TOE 网 卡 iscs 
+Initiator +initiator 
软件 方式 实现 方式 


软件 方式 


A 
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iSCSI 设备 通常 使 用 IP 接 口 作为 其 主机 接口 ， 并 可 以 通过 与 传统 以 太 网 交换 机 的 连接 ， 构 


建 一 个 基于 TCP/IP 协 议 的 存储 区 域 网 络 。 恨 据 主 机 端 所 采用 的 连接 方式 的 不 同 ，iSCSI 设 备 


与 主机 的 连接 通常 有 三 种 形式 

以 太 网 卡 +Initiator 软 件 方式 : 采用 这 种 方式 的 主机 使 用 标准 的 以 太 网 卡 (NIC 与 网 络 
进行 连接 。iSCSI 层 和 TCP/IP 协 议 栈 功 能 通过 主机 CPU 运 行 软件 计算 完成 。 由 于 这 种 方式 直 
接 使 用 传统 主机 系统 通用 的 NIC 椒 ， 所 以 成 本 最 低 ， 但 是 由 于 需要 占用 CPU 资 源 进 行 iSCSI 协 
议和 TCP/P 协 议 处 理 ， 所 以 会 导致 主机 系统 性 能 的 下 降 。 


TOE + Initiator 软 件 方式 : 腔 用 这 种 方式 的 主机 使 用 TOE (TCP offload Engine, TCPEIŻR 
引擎 ) 网 卡 ，iSCSI 协 议 的 功能 仍然 由 主机 的 CPU 完 成 ， 但 是 TCP 协 议 处 理 则 交 由 TOE 网 卡 完 
成 ， 从 而 有 效 减轻 了 主机 端的 负担 。 

iSCSI HBA 卡 方式 冷 采 用 这 种 方式 的 主机 ， 其 iSCSI 协 议 功 能 及 TCP/IP 协 议 栈 功能 均 由 iSCSI 
HBA 卡 完成 ,。 对 主机 的 开销 占用 最 小 。 


272 [] 


以 太 网 卡 +Initiator 软 件 实现 方式 





Initiator 软 件 完 成 

iSCSI 报 文 到 TCP/IP 

报 文 转换 ， 需 占用 
主机 资源 














基于 TCP/IP 协 议 4 D 
的 以 太 网 连接 | — E PSAN 网 络 > 了 


~ 一 一 
es 











nt 7 内 部 总 线 连 接 


存储 设备 S— 以 太 网 连接 
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服务 器 、 工 作 站 等 主机 设备 使 用 标准 的 以 太 网 卡 ， 通 过 以 太 网 线 直接 与 以 太 网 交换 机 连 
接 ，iSCSl 存 储 也 通过 以 太 网 线 连接 到 以 太 网 交换 机 上 ， 或 直接 连接 到 主机 的 以 太 网 卡 上 。 
在 主机 上 安装 Initiator 软 件 以便 将 以 太 网 卡 虚 拟 为 SCSI 卡 ， 用 以 接收 和 发 送 iSCS| 数 据 报 文 
， 从 而 实现 主机 和 iSCsI 设 备 之 间 的 SCsl 协 议和 TCP/P 协 议 传输 功能 。 由 于 采用 普通 的 标 
准 以 太 网 卡 和 以 太 网 交换 机 ， 无 需 额 外 配置 适配器 ， 因 此 此 种 方式 硬件 成 本 最 低 。 缺 点 是 
进行 SCSl 包 文 和 TCP/IP 包 文 转换 需要 库 用 主机 端的 资源 ， 使 主机 的 运行 开销 增加 而 导致 系 
统 性 能 下 降 。 不 过 在 对 于 |/ 和 市 宽 性 能 要 求 较 低 的 应 用 环境 中 基本 能 够 满足 数据 访问 要 


求 。 


0 
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TOE 网 卡 +lInitiator 软 件 实现 方式 

















Initiator 软 件 完成 
iSCSI 层 的 功能 ， 需 
占用 主机 资源 “| 一 
| TCP/IP 协 议 转换 由 
TOE 网 卡 完成 ， 不 告 


智能 以 太 网 卡 | 用 主机 资源 














基于 TCP/IP 协 议 = 
的 以 太 网 连接 | E IPSAN 网 络 ~ 


和 











ms) 7 内 部 总 线 连 接 


存储 设备 D 以 太 网 连接 
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EREMAN -E AT DOS PA LE BE Pi E A9 AM EE E R EIRE PET, 
TCP/P 协 议 栈 功 能 由 TOE 网 卡 完成 ， 而 iSCSI 层 的 功能 仍旧 由 主机 来 完成 ， 由 此 ， 采 用 TOE 
网 卡 可 以 大 幅度 提高 数据 的 传输 速率 .与 纯 软件 的 方式 相 比 较 而 言 ， 这 种 方式 部 分 降低 了 
主机 系统 的 运行 开销 而 又 不 会 使 网 络 构建 成 本 过 多 增加 ， 是 一 种 比较 折 训 的 配置 方案 。 
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iSCSI HBA 卡 连接 方式 


9 


iSCSIHBA 卡 引 





基于 TCP/IP 协 议 ~ 
的 以 太 网 连接 | 一、 E IPSAN 网 络 ~ 


J” 











存储 设备 
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完成 iSCSI 报 文 到 TCRAB 
报 文 转换 ， 完 全 不 占用 
主机 资源 





DT 7 内 部 总 线 连 接 


以 太 网 连接 
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在 主机 上 安装 SCSI HBA 适 配 卡 ， 从 而 实现 主机 与 交换 机 之 间 、 主 机 与 存储 设备 之 间 的 
高 效 数据 交换 。iSCSI 层 和 TCP/IP 协 议 栈 的 功能 均 由 主机 总 线 适配器 (HBA) 来 完成 ， 对 主 
机 CPU 的 占用 最 少 。 这 种 方式 数据 传输 性 能 最 好 ， 但 是 系统 构建 价格 也 最 高 。 
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© 目录 


IP SAN 产 生 与 发 展 

IP SAN 组 成 和 组 网 连接 
. isCsI 协 议 介 绍 

FC 协议 与 TCP 协 议 融 合 


A 


华为 IP SAN 存 储 的 实现 与 应 用 
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iSCSI 协议 


e iSCSI (Internet SCSI) 把 SCSI 命 令 和 块 状 数据 封装 在 TCP 中 在 IP 网 络 中 传 
偷 ， 基 本 出 发 点 是 利用 成 熟 的 IP 网 络 技 术 来 实现 和 延伸 SAN。 
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通过 SC3I 控 制 卡 的 使 用 可 以 连接 多 个 设备 ， 形 成 自己 的 “网 络 ” ， 但 是 这 个 “网 络 ” 仅 
局 限于 与 所 附加 的 主机 进行 通信 ， 并 不 能 在 以 太 网 上 共享 。 那 么 ， 如 果 能 够 通过 SC3I 协 议 
组 成 网 络 ， 并 且 能 够 直接 挂 载 到 以 太 网 上 ,作为 网 络 节点 和 其 它 设 备 进行 互联 共享 ， 那 么 
SCSI 就 可 以 得 到 更 为 广泛 的 应 用 。 所 以 , 经过 对 SCSI 的 改进 ， 就 推出 了 iSCSI 这 个 协议 。 基 
于 iSCSI 协议 的 IP-SAN 是 把 用 户 的 请 求 转换 成 3CSI 代 码 ， 并 将 数据 封装 进 IP 包 内 在 以 太 网 中 
进行 传输 。 

iSC9| 方 案 最 早 是 由 Cisce 和 IBM 两 家 发 起 ， 并 且 由 Adaptec、Cisco、HP、IBM、 
Quontum 等 公司 共同 倡导 。 它 提供 基于 TCP 传 输 ， 将 数据 驻 留 与 5CSl 设 备 的 方法 。iSCS| 
标准 草案 在 2001 年 推出 ， 并 经 过 多 次 论证 和 修改 ， 于 2002 年 提交 IETF， 在 2003 年 2 月 ， 
iSCSI 标 准 正式 发 布 。 “iSCSI 技 术 的 重要 贡献 在 于 其 对 传统 技术 的 继承 和 发 展 : 其 一 ，SC3| 

(Small Computer System Interface， 小 型 计算 机 系统 接口 ) 技术 是 被 磁盘 、 磁 带 等 设 
备 广泛 采用 的 存储 标准 ， 从 1986 年 诞生 起 到 现在 仍然 保持 着 良好 的 发 展 势 头 ; 其 二 ， 沿 用 
TCP/P 协 议 全 ITCPV/IP 在 网 络 方面 是 最 通用 、 最 成 熟 的 协议 ， 且 IP 网 络 的 基础 建设 非常 完善 。 
这 两 点 为 NGsSI 的 无 限 扩展 提供 了 坚实 的 基础 。 

IP 网 络 的 普及 性 将 使 得 数据 可 以 通过 LAN、WAN 或 者 是 通过 Internet 利 用 新 型 IP 存 储 协 
议 传输 ,NSCSI| 既 是 在 这 个 思想 的 指导 下 进行 研究 和 开发 的 。iSCSl 是 基于 IP 协 议 的 技术 标准 ， 
实现 予 SCSI 和 TCP/IP 协 议 的 融合 ， 对 众多 的 以 太 网 用 户 而 言 ， 只 需要 极 少 的 投资 ， 就 可 以 
方便 、 快 捷 地 对 信息 和 数据 进行 交互 式 传输 和 管理 。 
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0 


iSCSI 体系 结构 


e iSCSI 节 点 将 5CSI 指 令 和 数据 封装 成 SCSl 包 ， 然 后 该 数据 封装 被 传送 给 
TCP/JIP 层 ， 再 由 TCP/IP 协 议 将 iSCsl 包 封装 成 IP 协 议 数据 以 适合 在 网 络 中 传 


输 。 


isCSI 节 点 | | iSCSI 节点 
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在 支持 iSC5I 的 系统 中 ， 用 户 在 一 人 台 3C5l 存 储 设备 上 发 出 存 数据 或 取 数 据 的 命令 ， 操 作 
系统 对 该 请 求 进行 处 理 ， 并 将 该 请 求 转换 成 一 条 或 者 多 条 SC3| 指 令 ， 然 后 再 传 给 目标 SC3| 
控制 卡 。iSC3I 节 点 将 指令 和 数据 封装 NIEncapsulation) 起 来 ， 形 成 一 个 SC3l 包 ， 然 后 
该 数据 封装 被 传送 给 TCP/IP 层 ， 再 由 ICPWIP 协 议 将 SCsl 包 封装 成 | 协议 数据 以 适合 在 网 络 
中 传输 。 也 可 以 对 封装 的 SC3I 命 令 进行 加 密 处 理 ， 然 后 在 不 安全 的 网 络 上 传送 。 


数据 包 可 以 在 局 域 网 或 Infermet 上 传送 。 在 接收 存储 控制 器 上 ， 数 据 报 重新 被 组 合 ， 然 
后 存储 控制 器 读 取 iSCSI 包 中 的 SCsl 控 制 命令 和 数据 发 送 到 相应 的 磁盘 驱动 器 上 ， 磁 盘 驱 动 
器 再 执行 初始 计算 机 或 应 用 所 需求 的 功能 。 如 果 发 送 的 是 数据 请 求 ， 那 么 将 数据 从 磁盘 驱 
动 器 中 取出 进行 封装 后 发 送 给 发 出 请 求 的 计算 机 ， 而 这 整个 过 程 对 于 用 户 来 说 都 是 透明 的 。 
尽管 SC3I 命 令 的 执行 和 数据 准备 可 以 通过 使 用 标准 TCP/IP 和 现成 的 网 络 控制 卡 的 软件 来 完 
成 ， 但 是 在 利用 软件 完成 封装 和 解 封 装 的 情况 下 ， 在 主机 处 理 器 上 实现 这 些 功能 需要 很 多 
的 CPU 运算 周期 来 处 理 数据 和 3C3I 命 令 。 如 果 将 这 些 事务 交 给 专门 的 设备 处 理 ， 则 可 以 将 
对 系统 性 能 的 影响 减少 到 最 小 程度 ， 因 此 ， 发 展 在 SC3I 标 准 下 并 执行 3C3I 命 令 和 完成 数据 
准备 的 专用 iSCSl 适 配器 是 有 必要 的 。iSCS| 适配器 结合 了 NIC 和 HBA 的 功能 。 这 种 适配器 
以 块 方式 取得 数据 ， 利 用 TCP/IP 处 理 引 擎 在 适 配 卡 上 完成 数据 分 化 和 处 理 ， 然 后 通过 IP 网 
络 送出 恨 数据 包 。 这 些 功 能 的 完成 使 用 户 可 以 在 不 降低 服务 器 性 能 的 基础 上 创建 一 个 基于 
IP 的 SAN。 
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ISCSIÉITÆ cm 5 AR 
。 发 起 端 (Initiator) 


o SCSI 层 负责 生成 CDB (命令 描述 符 块 ) ， bd 


将 CDB 传 给 iSCSI 


o ”iSCSI| 层 负责 生成 SCS| PDU (协议 数据 单 
元 ) ， 并 通过 IP 网 络 将 PDU 发 给 target 


。 目标 器 (Target) 
o isCSsI 层 收 到 PDU， 将 CDB 传 给 SCSI 层 


o SCSI 层 负责 解释 CDB 的 意义 ， 必 要 时 发 送 
响应 





iSCSI 的 通信 体系 仍然 继承 了 SCSI 的 部 分 特性 5 在 iSCSI 通信 中 ， 具 有 一 个 发 起 MO 请 求 
的 启动 器 设备 (Initiator) 和 响应 请 求 并 执行 实际 MO 操作 的 目标 器 设备 (Target) 。 在 
Initigtor 和 Target 建 立 连 接 后 ，Target 在 操作 中 作为 主 设备 控制 整个 工作 过 程 。 

e iSCSI Initiator 


iSCSI 启 动 器 ， 可 分 为 三 种 ， 即 软件 Initiator 驱 动 程序 、 硬 件 的 TOE (TCP Offload 
Engine, TCPHRSIŻ) 卡 以 及 iSGSI HBA 卡 。 就 性 能 而 言 ， 软 件 Initiator 驱 动 程序 最 差 、 
TOE 卡 居中 、iSCSI HBA 卡 最 佳 % 
e iSCSlTarget 

iSCSI 目 标 器 iSCSITargeb， 通 常 为 SCS| 磁 盘 阵 列 、iSCSI 磁带 库 等 。 


iSCSI 协议 为 Initiator 和 Target 定 义 了 一 套 命名 和 寻 址 方法 。 所 有 的 iSCSI 节点 都 是 通过 
其 iSCSI 名 称 被 标识 的 ″ 这 种 命名 方式 使 得 iSCSI 名 称 不 会 与 主机 名 混淆 。 


iSCSI 使 用 iSCSI Name 来 唯一 鉴别 启动 设备 和 目标 设备 。 地 址 会 随 着 启动 设备 和 目标 
设备 的 移动 而 改变 ， 但 是 名 字 始 终 是 不 变 的。 建立 连接 时 ， 启 动 设备 发 出 一 个 请 求 ， 目 标 
设备 接收 到 请 求 后 ， 确 认 启 动 设备 发 起 的 请 求 中 所 携带 的 SCSI Name 是 否 与 目标 设备 绑 
定 的 iSCSKNName 一 致 ， 如 果 一 致 ， 便 建立 通信 连接 。 每 个 iSCSI 节点 只 允许 有 一 个 iSCSI 
Name 人 一 个 iSCSI Name 可 以 被 用 来 建立 一 个 启动 设备 到 多 个 目标 设备 的 连接 ， 多 个 
iSCSKHName 可 以 被 用 来 建立 一 个 目标 设备 到 多 个 启动 设备 的 连接 。 
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iSCSI 数 据 包 封装 模型 


。 所 有 的 3CSI 命 令 都 被 封装 成 SCSI 协 议 数据 单元 
。 iSCSI 利 用 TCP/IP 协 议 栈 中 传输 层 的 TCP 协 议 为 连接 提供 可 靠 的 传输 机 制 


P 
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支持 iSCSI 的 服务 器 可 以 配置 一 块 专 用 的 iSC5SI 主 机 总 线 适 配器 卡 。 所 有 的 SCSI 命 令 都 被 
封装 成 SCSI 协 议 数 据 单 元 (Protocol Data ‘Unit, PDU) ，iSCSI 会 利用 TCP/IP 协 议 栈 中 
传输 层 的 TCP 协 议 为 连接 提供 可 靠 的 传输 机 制 ， 再 封装 TCP 数 据 段 头 以 及 IP 数 据 包 头 后 ， 
其 内 部 所 封装 的 SC3I 命 令 或 数据 对 于 底层 网 络 设备 而 言 是 不 可 见 的 ， 网 络 设备 只 会 将 其 视 
为 普通 IP 数 据 包 进行 传递 ， 从 而 实现 予 SC3SI 指 令 和 数据 的 透明 传输 。 

iSCSI 协议 是 将 SCSI 的 远程 过 程 调 妥 (Remote Procedure Call, RPC) 映射 到 IP 协 议 
的 过 程 。iSCSI 协 议 提供 了 独立 于 其 所 携带 的 SCSl CDB 的 层 的 概念 。iSC3I 请 求 传递 CSI 命 
令 ，iSCSI 响 应 处 理 SCSI 响 应 和 状态 。iSCSI 为 基于 IP 协 议 的 PDU 提 供 了 一 个 在 SCSI 的 命令 
结构 内 映射 的 机 制 ，SESI 的 命令 及 参数 被 填充 在 一 定 长 度 的 数据 块 内 进行 传输 。 一 个 iSCSI 
翻译 器 取得 SCSI CDB. (Command description Block， 命 令 描 述 块 ) ， 并 将 其 映射 为 
ISCSI PDU， 在 1EP 连 接站 发 送 到 一 个 目标 iSCSI 设 备 。 翻 译 器 通过 连接 ID 识 别 一 组 映射 
SCSl 连 接 的 TCP 和 连接 o> 从 启动 设备 和 目标 设备 的 角度 来 看 ， 这 个 连接 就 像 是 一 个 普通 的 
SC5l 通 信 一 样 ， 整 个 IP 传 输 对 于 启动 器 设备 和 目标 设备 而 言 是 透明 的 。 启 动 设备 或 目标 设 
备 可 以 是 一 个 SC3I 设 备 ， 能 够 用 TCP 直 接 在 IP 网 中 通信 。 
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FC-SAN 与 |P-SAN 在 产品 上 的 融合 


ETAT EME 
SEES Li 


CERF) iSCSI 主机 奖品 


存储 产品 中 既 包 
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括 SGsI 接 口 
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4 


[三 接 区 用 取 务 如 上 的 10Gb] 
iSCSI 主机 端口 | 
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如 磁盘 阵列 上 控制 器 上 即 包含 FC 端 口 、 又 包含 iSCSI 口 ， 能 同时 满足 FC-SAN 的 组 网 需 
求 ， 也 能 满足 IP-SAN 的 组 网 需求 ， 这 是 不 完全 的 融合 。 
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FC-SAN 与 1P-SAN 解 决 方案 的 融合 


校园 网 服务 器 


应 用 服务 器 群 
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统一 存储 解决 方案 典型 系列 产品 ， 可 以 同时 对 外 提供 FC-SAN、IP-SAN 和 NAS 共 享 。 
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FC 与 TCP 协 议 融 合 


。 目前 FC 与 TCP/IP 协 议 的 真正 融合 主要 有 两 种 趋势 : 
0 TCP/IP 网 络 承载 FC 信道 
= FCIP 
= iFCP 
= FCOE 
o ”以 FC 信道 承载 [TCP/IP 数 扩 
= IPFC 
。 从 现 有 的 情况 来 看 ， 以 太 网 技术 和 FC 技 术 都 在 飞速 发 展 \IPsAN 和 FC- 
SAN 会 在 很 长 的 一 段 时 间 内 都 将 是 并 存 且 互 为 补充 的 。 
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FCIP(Fibre Channel over IP)， 基 于 IP 的 光纤 通道 (FCIP) 是 连接 TCP/IP 网 络 链 路 上 
的 光纤 通道 架构 的 一 项 IETF 建 议 标准 。 利 用 目前 的 IP 协 议和 设施 来 连接 两 个 异地 FC SAN 的 
隧道 ， 用 以 解决 两 个 FC SAN 的 互 连 问题 。 

iFCP(Internet Fibre Channel Protocol), Internetā tiy (iFCP) 是 一 种 网 关 
到 网 关 的 协议 ， 为 TCP/IP 网 络 上 的 光纤 设备 提供 光纤 信道 通信 服务 。iFCP 使 用 TCP 提供 
拥塞 控制 、 差 错 监测 与 恢复 功能 。iFCP 主 要 目标 是 使 现 有 的 光纤 信道 设备 能 够 在 IP 网 络 上 
以 线 速 互联 与 组 网 。 此 协议 及 其 定义 的 帧 地 址 转换 方法 允许 通过 透明 网 关 (transparent 
gateway) 将 光纤 信道 存储 设备 附加 到 基于 IP 的 网 络 结构 。 

FCoE(Fibre Channel over Ethernet)， 它 利用 以 太 网 路 ， 传 送 光 纤 通 道 (Fibre 
Channel) 的 信号 ， 让 光纤 通信 的 资料 可 以 在 10 Gigabit 以 太 网 路 网 络 骨 干 中 传输 ， 但 仍 
然 是 使 用 光纤 通道 的 协定 。 

IPFC(IP over Fiber Channel， 在 光纤 通道 上 的 IP)。IPFC 使 用 在 两 个 服务 器 之 间 的 光纤 
通道 连接 作为 |P 数 据 交换 的 媒介 。 为 此 ，IPFC 定 义 了 如 何 通过 光纤 通道 网 络 传送 IP 分 组 。 
跟 所 有 的 应 用 协议 一 样 ，IPFC 实 现 为 在 操作 系统 中 的 一 个 设备 驱动 器 。 对 本 地 IP 配 置 的 连 
接 使 用 “ifcenfig” 或 “ipconfig”。 然 后 IPFC 驱 动 器 寻 址 光纤 通道 主机 适 配 卡 ， 就 可 以 
在 光纤 通道 上 发 送 IP 分 组 。 


下 面 我 们 着 重 介绍 一 下 FCIP 和 iFCP 协 议 。 
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FCIP 协 议 


FCIP 网 关 


“Fc 实 休 。 FcIP 实 体 FcIP 实 休 。 FC 实 体 


FC HBA GE NIC GE NIC FC HBA 


FCIP 网 关 


| TCP/IP 


We a” 


FC 存储 阵列 FC 存储 阵列 
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FCIP (Fiber Channel overIP， 基 于 IP 协 议 的 光纤 通道 ) 是 基于 IP 协 议 传输 的 光纤 通道 
数据 帧 的 解决 方案 ， 是 由 Brocadaade、Goagzoocx、Lucent、McDaftao 以 及 Qlogic 公 司 共同 
提出 的 。FCIP 这 一 技术 的 核心 ， 是 把 光纤 通道 协议 的 数据 帧 封装 在 IP 数 据 包 里 ， 以 便 在 覆 
盖 广 阔 的 TCP/IP 网 络 中 进行 传递 。 网 络 中 的 其 它 设备 接收 后 ， 由 专门 的 目标 设备 进行 解 封 
装 还 原 FC 数 据 帧 。FCIP 协 议 实质 上 就 是 采用 隧道 技术 的 IP-SAN 方 案 。 采 用 FCIP 技 术 可 以 
实现 利用 目前 的 IP 网 络 来 连接 两 个 异地 的 FC-SAN， 以 解决 FC-SAN 之 间 的 互联 问题 。 这 一 
隧道 传输 技术 是 通过 使 用 FCIP 网 关 来 实现 的 ， 通 过 光纤 通道 交换 机 的 扩展 端口 连接 到 每 个 
FC-3SAN 上 ， 所 有 发 往 远 程 站 点 的 存储 数据 均 通过 公用 的 IP 隧 道 。 接 收 端的 光纤 通道 交换 
机 负责 将 到 来 的 每 个 帧 交换 至 目的 光纤 通道 端点 设备 。 


FCIP 协 议 是 一 种 隧道 (tunnel) 协议 ，IP 地 址 和 TCP 连 接 只 用 在 位 于 IP 网 络 重点 的 FCIP 
网 关 设 备 上 。FCJP 能 够 为 两 个 FC-SAN 之 间 提 供 IP 连 接 ， 但 是 不 能 为 两 个 独立 的 FC 存储 设 
备 提供 IP 连 接 ， 即 FCIP 不 能 通过 IP 协 议 实现 FC 存储 设备 端 到 端的 连接 。 

FCIP 协 议 利 用 IP 网 络 中 创建 的 “隧道 ”在 两 个 FC-SAN 网 络 之 间 实 现 FC 协 议 的 数据 传输 ， 
将 真正 意义 上 的 远程 数据 镜像 和 FC-SAN 的 灵活 性 以 及 IP 网 络 的 低 成 本 和 易 用 性 结合 在 一 
起 ， 降 低 邓 远程 操作 的 成 本 和 操作 的 复杂 性 。FCIP 提 供 了 在 TCP/IP 协 议 中 封装 FC 协议 数 
据 帧 的 方法 # 消除 了 FC 目前 存在 的 距离 限制 ， 人 允许 通过 IP 网 络 来 互联 FC-SAN， 使 得 数据 
的 访问 变 得 更 加 灵活 ， 存 储 策略 的 部 署 更 加 容易 。 
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FCIP 的 协议 栈 


。 在 FCIP 的 协议 栈 中 ，FCIP 协 议 处 于 FC 和 TCP 之 间 ， 也 就 意味 着 FCIP 可 
以 互联 FC 和 TCP 这 两 种 协议 网 络 。 


SCSI 应 用 (文件 系统 、 数 据 库 ) 


SCSI 块 指令 SCSI 流 指令 
SCSI 指令 、 数 据 和 状态 
TCP 


FCIP 
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FCIP 协 议 是 一 个 点 到 点 的 隧道 封装 协议 ， 它 本 以 实现 多 个 本 地 FC-3AN 网 络 经 由 FCIP 网 
关 通 过 IP 网 络 进行 互联 并 对 其 进行 管理 。 答 FGIP 的 协议 栈 中 ，FCIP 协 议 处 于 FC 和 TCP 之 间 ， 
也 就 意味 着 FCIP 可 以 互联 FC 和 TCP 这 两 种 协议 网 络 。 在 TCP 下 层 是 IP 协 议和 下 层 的 数据 链 
路 以 及 物理 层 协 议 ， 而 FC 协议 的 上 层 则 有 FCP 和 SC5I 协 议 ， 由 此 可 见 FCIP 协 议 联系 了 底 
层 的 IP 网 络 和 高 层 的 CSI 应 用 ， 实 现 畔 不 同 网 络 、 不 同 协议 之 间 的 网 络 设备 互联 和 应 用 的 


ahó 
FR A © 
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FCIP 的 数据 封装 


。 FCIP 协 议 是 一 个 隧道 协议 ， 它 提供 把 FC 协议 数据 帧 封装 进 IP 包 以 便 
在 IP 网 络 中 进行 传输 的 方法 


k— FC 封装 部 分 — 
< 一 IP 封 装 部 分 一 一 > IP 数 据 部 分 
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在 FCIP 数 据 封装 中 ， 光 纤 通 道 网 络 体系 结构 提供 的 终端 寻 址 、 地 址 解析 、 信 息 路 由 等 
均 保 持 不 变 ， 而 IP 协 议 在 这 里 只 是 作为 传输 协议 用 以 承载 [C 数 据 帧 在 IP 网 络 中 进行 传输 。 


FCIP 在 FC 帧 和 TCP 包 头 之 间 加 入 了 FCIP 筷 头 、 用 来 显示 FCIP 协 议 的 版 本 、 帧 长 度 等 字 
段 。 发 送 端 FCIP 网 关 设备 将 FC 封装 为 FCIP 帧 ， 通 过 IP 网 络 传送 。 接 收 端 FCIP 网 关 设备 接 
收 到 FCIP 由 后 ， 角 封装 P 和 TCP 报 区 生 原 成 FC 核 并 通过 一 个 或 多 个 FC 交换 机 发 送 到 上 
的 节 
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FCIP 通 信和 原理 


FCIP LEP FCIP LEP 
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整个 FCIP 的 通信 过 程 是 由 其 数据 引擎 推动 进行 的 。 首 先 在 源 FCIP 连 接 端点 (FCIP Link 
EndPoint, FCIP LEP) 处 对 FC 协 议 数 据 帧 进 衍 封装， 然后 通过 TCP/P 协 议 在 IP 网 络 中 进 
行 传输 ， 到 达 目 的 FCIP 连 接 端 点 后 进行 解 封装 ， 读 出 其 中 的 数据 并 执行 其 中 的 FC 指令 。 


FCIP 作 为 一 种 隧道 技术 ， 仍 然 存在 一 些 缺 点 。 首 先 ， 其 带宽 相对 FC 而 言 ， 由 于 利用 的 是 
iP 通道 ， 所 以 带宽 仍 远 低 于 FC。 其 次 ,由 于 FC 协议 帧 被 封装 进 IP 数 据 包 中 ， 但 是 IP 网 络 智 
能 管理 工具 并 不 能 识别 这 些 数 据 ， 使 得 很 多 很 好 的 管理 控制 机 制 无 法 应 用 于 FCIP， 比 如 目 
录 服 务 、 流 量 控制 和 Qos 等 。 纯 后 ， 由 于 FCIP 仅 仅 是 在 TCP/P 网 络 中 构建 起 一 个 传输 FC 协 议 
帧 的 隧道 将 两 个 远 端的 FC-SAN 连 接 起 来 ， 它 并 没有 解决 单个 FC-SAN 的 设备 互 操作 性 问题 和 
管理 问题 ， 本 地 的 SAN 仍 然 是 采用 的 FC 技 术 。 
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iFCP 协 议 


。 iFCP (Internet Fibre Channel Protocol， 互 联网 光纤 通道 协议 ) 是 一 种 
网 关 到 网 关 的 协议 ， 为 TCP/IP 网 络 上 的 光纤 通道 设备 提供 光纤 信道 通信 服 
务 ， 也 就 是 可 以 实现 端 到 端的 IP 连 接 。 


SE 风 关 “一 TCP/IP i 


D 


FC 存 储 阵列 FC 存 储 阵列 
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iFCP (Internet Fiore Channel Protocol, =EN Xap KN) 是 一 种 网 关 到 网 关 
的 协议 ， 为 TCP/P 网 络 上 的 光纤 通道 设备 提供 光纤 信道 通信 服务 ， 也 就 是 可 以 实现 端 到 端 
的 IP 连 接 。FC 存 储 阵列 、HBA (主机 总 线 适配器 ，Host Bus Adapter) 、 交 换 机 等 可 以 直 
接连 接 到 iFCP 网 关上 。iFCP 使 用 TCP 提 供 流 量 控制 、 错 误 检 测 和 错误 恢复 功能 。iFCP 主 要 
目标 是 使 现 有 的 光纤 信道 设备 能 够 在 上 网 络 上 实现 高 速 互联 与 组 网 。iFCP 及 其 定义 的 帧 地 
址 转换 方法 允许 通过 透明 网 关 将 FC 存储 设备 挂 载 到 基于 TCP/IP 协议 的 网 络 结构 中 。 


iFCP 可 以 直接 蔡 代 FC 架构 $ 通过 iFCP 存 储 交换 机 可 以 直接 连接 FC 的 各 个 设备 并 进行 分 
组 ， 而 不 仅仅 是 简单 地 对 FC->AN 进 行 远 程 连接 ， 但 是 iFCP 不 支持 独立 的 存储 区 域 网 络 的 
合并 操作 (Merge) 从 因此 无 法 组 成 单一 的 逻辑 3AN 。iFCP 的 优势 在 于 在 建立 连接 的 同 
时 还 能 够 建立 网 关 分 区 ， 可 以 将 出 现 故障 的 区 域 隔离 开 来 ， 并 克服 了 点 到 点 隧道 的 限制 。 
并 且 iFCP 提 供 FC 设备 端 到 端的 连接 ，TCP 连 接 的 中 断 只 会 影响 到 一 个 通信 对 ， 而 不 会 影响 
到 其 他 通信 ， 也 不 会 将 一 个 设备 的 错误 带 给 其 他 设备 。 基 于 iFCP 实 现 了 SAN 的 路 由 故障 隔 
离 、 安 全 及 灵活 管理 ， 具 有 上 比 FCIP 更 高 的 可 靠 性 。 
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iFCP 的 协议 栈 


。 iFCP 协 议 位 于 TCP/IP 协 议和 FC 协议 之 间 ， 可 以 起 到 连接 这 两 种 协议 网 络 的 


作用 。 





SCSI 应 用 (文件 系统 、 数 据 库 ) 
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iFCP 协 议 位 于 TCP/AP 协 议和 FC 协 议 之 间 ， 可 以 起 到 连接 这 两 种 协议 网 络 的 作用 。iFCP 
协议 层 的 主要 功能 是 在 本 地 和 远程 N_PGRT 间 传输 光纤 通道 帧 映像 。 当 帧 被 传输 到 远程 
N_PORT 时 ，iFCP 层 开始 封装 并 路 由 光纤 通道 帧 。 光 纤 通 道 帧 包括 每 一 个 光纤 通道 信息 单 


， 通 过 预先 建立 的 TCP 连 接 在 IP 网 络 上 传输 。 


iFCP 协 议 封 装 


。 在 iFCP 层 中 ，FC 设 备 的 24 位 fabric 地 址 被 映射 到 一 个 唯一 的 IP 地 址 上 ， 为 
Fibre Channel 启 动 器 和 目标 提供 了 本 地 IP 地 址 的 编 址 工作 。 


K 


TCP 报 头 iFCP 报 头 Fiber Channeli 
D_IP:01XXXX D_ID:01XXXX 
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iFCP 在 FC 帧 和 TCP 包 头 之 间 ， 在 iFCP 层 中 ,FEG 设 备 的 24 位 fabric 地 址 被 映射 到 一 个 唯 
一 的 IP 地 址 上 ， 为 Fibre Channel 启 动 器 和 目标 提供 了 本 地 IP 地 址 的 编 址 工作 。iFCP 代 替 
了 Fibre Channel 的 底层 传输 层 (FC-2) ， 它 使 用 TCP/IP 在 IP 网 络 上 进行 可 靠 传 输 。 


0 
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iFCP 的 工作 原理 


E Device 
| LAURE EC rrafic -一 一 一 
N/NL-Port 
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iFCP 的 工作 原理 是 ， 将 Fibre Channel 数 据 以 IP 包 形式 封装 ， 并 将 IP 地 址 映射 到 分 离 光 
纤 通 道 设备 。 由 于 在 IP 网 中 每 类 光纤 通道 设备 都 有 其 独特 标识 ， 因 而 能 够 与 位 于 IP 网 其 他 
节点 的 设备 单独 进行 存储 数据 收发 。 光 纤 通道 信号 在 iFCP 网 关 处 终止 ， 信 号 转换 后 存储 通 
信 在 IP 网 中 进行 ， 这 样 iFCP 就 打破 了 传统 光纤 通道 网 的 距离 (在 不 使 用 中 继 器 的 情况 下 ， 
FC 的 传输 距离 约 为 10 公 里 ) 限制 。 
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iFCP 网 络 体系 架构 


Fibre 
DER 
村 


~- _- 





Copyright © 2013 Huawei Technologies Co., Ltd. All rights reservēd. Page 33 w HUAWEI 


在 使 用 iFCP 协 议 构 建 的 IP-SAN 存 储 网 络 中 ， 存 储 设备 没有 被 限制 在 光纤 通道 AN 的 IP 网 
络 中 分 布 。iFCP 存 储 交换 机 直接 接替 FCASAN 中 的 光纤 通道 交换 机 ， 这 就 意味 着 iFCP 交 换 
机 也 具有 SNS 〈 存 储 名 称 服务 器 ) 功能 、 为 终端 节点 提供 名 称 发 现 服务 。 在 iFCP 交 换 机 中 
指派 4 字 节 的 IP 地 址 给 每 一 个 光纤 通道 终端 节点 。 当 光纤 通道 设备 发 送 一 个 ?NS 名 称 查询 时 ， 
这 个 请 求 将 被 FCP 交 换 机 截 住 ， 亲 由 iSNS 服 务 器 进行 解释 。 在 光纤 通道 层 ， 一 个 适用 的 目 
标 地 址 表 将 返回 给 发 起 者 ， 此 时 其 余 P 的 光纤 通道 地 址 表 就 映射 光纤 通道 地 址 ， 以 便 相应 
的 IP 地 址 可 以 通过 IP 网 络 传 到 目标 设备 。 
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Pr rate naak FCIP 可 以 看 作 是 FC 的 扩展 策略 ， 它 
包含 了 部 分 的 IP 协 议 信 息 和 大 量 的 FC 成 以 从 严格 意义 上 来 说 FCIP 并 不 能 算 真 正 的 IP 
存储 策略 。 而 iSCSI 协 议 目的 则 是 要 用 i iSCSI 协 议 
中 完全 不 含有 FC 的 内 容 ， 只 包含 了 IP 信 息 。iSCSI 与 iFCP 相 比较 具有 一 定 的 相似 性 ，iSCSI 
和 iFCP 都 在 存储 端 设备 中 采用 了 IP 坟 议 技 术 ， 而 不 同 在 于 ，iSC5I| 为 通过 IP 网 络 进 行 块 数据 
传输 ， ee ea 这 三 种 协议 都 位 于 TCP/IP 和 SCSI 协 议 之 间 ， 为 
0 S E 





FCoE 协 议 


。 直接 在 增强 型 无 损 以 太 网 基础 设施 上 传输 光纤 信道 信号 功能 的 协议 。 
。 FCoE 把 FC 帧 封装 在 以 太 网 帧 中 ， 人 允许 LAN 和 SAN 的 业务 流量 在 同一 个 以 太 


网 中 传送 。 
S 
链 路 层 帧 
- 块 存储 FCBSE 
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FCoE (Fibre Channel over Ethernet) 可 以 提供 标准 的 光纤 通道 原 有 服务 ， 如 发 现 、 全 
局 名 称 命名 、 分 区 等 ， 而 且 这 些 服务 都 可 以 照 标 准 原 有 的 运作 ,保有 FC 原 有 的 低 延 迟 性 、 
高 性 能 。 

从 FC 协议 的 角度 来 看 ，FCoE 就 是 把 FC 承载 在 一 种 新 型 的 链 路 上 ， 即 以 太 网 二 层 链 路 ; 
从 以 太 网 的 角度 来 看 ，FCoE 仅 是 其 承载 的 另外 一 种 上 层 协 议 (类 似 于 IP/IPX) 。 


o0 290 


0 


FCoE 协 议 的 封装 


。 FCoE 是 把 FC-2 层 以 上 的 内 容 封装 到 以 太 网 报 文中 进行 承载 。 


FC 协议 层 


以 太 网 协议 层 
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FC 网 络 协议 栈 有 五 层 ， 其 中 FC0 定 义 承载 介质 类 型 ，FC1 定 义 帧 编 解 码 方式 ，FC2 定 义 
分 帧 协议 和 流 控 机 制 ，FC3 定 义 通 用 服务 % FCG4 定 义 上 层 协 议 到 FC 的 映射 。 
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融合 增强 型 以 太 网 (CEE) 


FCoFE 采 用 增强 型 以 太 网 作为 物理 网 络 传输 架构 ， 能 够 提供 标准 的 光纤 通道 
有 效 内 容 载荷 。 
。 融合 增强 型 以 太 网 (CEE) 可 以 避免 类 似 TCP/IP 协 议 的 开销 和 数据 包 损 夫 % 


Q 


基于 优先 增强 的 伟 
级 的 流量 输 选 择 拥塞 通告、| 
控制 (ETS) 


; 
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传统 的 以 太 网 是 一 种 尽力 服务 的 网 络 模式 ， 当 网 络 拥塞 时 有 可 能 发 生 丢 包 ， 进 而 导致 出 
现 数据 包 重 传 或 超时 现象 。FCoE 网 络 融 合 技术 的 出 现 ， 对 以 太 网 提出 了 无 丢 包 服务 的 要 
求 。 为 此 ，IEEE 802.1 和 IETF 标 准 组 织 制定 一 些 新 的 标准 ， 创 建 一 个 新 的 、 更 强大 的 以 太 网 
协议 系列 ， 即 融合 增强 型 以 太 网 (CEE) We 


。 基于 优先 级 的 流量 控制 (PFC) 
以 太 网 Pause 机 制 能 够 实现 网 络 不 丢 包 的 要 求 ， 但 它 会 阻止 一 条 链 路 上 的 所 有 流量 ，PFC 
是 对 Pause 机 制 的 一 种 增强 PFC 可 以 在 一 条 以 太 物 理 链 路 上 创建 8 个 独立 的 虚拟 链 路 ， 并 
允许 单独 暂停 和 重启 其 中 任意 一 条 虚拟 链 路 。 这 一 方法 使 网 络 能 够 为 单个 虚拟 链 路 创建 无 
丢 包 类 别 的 服务 ， 使 其 能 够 与 同一 接口 上 的 其 他 类 型 的 流量 共存 。 
。 增强 的 传输 选择 (ETS) 
ETS 可 以 为 为 不 同 的 业务 流量 设 定 优先 级 和 保证 带宽 ， 并 人 允许 低 优先 级 的 流量 使 用 高 优 
先 级 队列 闲置 的 带宽 ， 这 样 可 以 提高 整个 网 络 的 效率 。 
。 拥塞 通告 
当 网 络 中 发 生 拥 塞 时 ， 由 拥塞 点 向 数据 源 发 送 指示 来 限制 引起 拥塞 的 流量 
失 有 时 通知 其 取消 限制 。 拥 塞 通知 提供 了 一 种 在 二 层 网 络 对 持续 拥塞 的 流量 端 


并 在 拥塞 消 


3 
到 端 管理 方法 


0 


o 
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. 华为 IP SAN 存 储 的 实现 与 应 用 
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华为 IP SAN 存 储 应 用 





模块 电源 指示 灯 一 一 VE a Gr 


TOE + HSE 14 H 


? 


: 1Gb iSCSI 主机 端口 
1Gb iSCSI 主 机 端口 spesd 指 示 灯 


和 


_ 1Gb iSCSI 主机 端口 
linklactive 指 示 灯 
TOE 主 机 端口 _ 
link/ FRA] 


BE 
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1Gb iSCSI 接口 模块 提供 了 应 用 服务 器 与 存储 系统 的 业务 接口 ， 用 于 接收 应 用 服务 器 发 
出 的 数据 读 写 指令 。1Gb iSCSI 接口 模块 提供 4 个 传输 速率 为 1Gbits 的 iSCSI 接口 ， 用 于 接收 
应 用 服务 器 发 出 的 数据 交换 命令 。 

10Gb TOE 接 口 模块 提供 了 应 用 服务 器 与 存储 系统 的 业务 接口 ， 用 于 接收 应 用 服务 器 发 
出 的 数据 读 写 指令 。10Gb TOE 接 加 模块 提供 4 个 传输 速率 为 10Gbits 的 TOE 接 口 ， 用 于 接收 
应 用 服务 器 发 出 的 数据 交换 命令 。 
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化 为 存储 IP SAN 应 用 一 一 S2600T 


应 用 服务 器 


以 太 网 交换 机 1 


以 大 网 交换 机 2 E EE 


S2600T 
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华为 52600T 存 储 阵列 通过 网 线 或 光纤 将 控制 框 5SCSI 主 机 端口 与 应 用 服务 器 端口 进行 连 
接 ， 建 立业 务 通道 ， 实 现存 储 设备 与 应 用 服务 器 之 间 的 数据 交换 。iSCSI 主 机 端口 有 1Gbit/s 
和 10Gbits 两 种 速率 ， 分 别 使 用 网 线 和 光纤 连接 。 


当 1Gb iSCSI 主机 端口 的 速率 设置 为 1000Mbits 时 ， 不 支持 半 双 工 模式 。 
存储 设备 与 应 用 服务 器 的 连接 方式 有 两 种 : 
o 直接 连接 
o 通过 以 太 网 交换 机 连接 
通过 以 太 网 交换 机 连接 时 ， 建 议 您 提前 做 好 以 下 规划 : 
o 交换 机 网 段 的 规划 ， 并 确定 使 用 网 段 对 应 的 交换 机 端口 。 
o 交换 机 的 首尾 端口 常用 于 交换 机 之 间 的 组 网 ， 不 建议 用 于 主机 与 存储 设备 连接 。 


化 为 存储 IP SAN 应 用 一 一 S5500T 


应 用 服务 器 


以 太 网 交换 机 1 


以 太 网 交换 机 2 


als 
$5500T | 5 -aa 
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华为 955500T 存 储 阵列 通过 网 线 或 光纤 将 控制 框 isCsl 主 机 端口 与 应 用 服务 器 端口 进行 连 
接 ， 建 立业 务 通道 ， 实 现存 储 设 备 与 应 用 服务 器 之 间 的 数据 交换 。iSC9l 主 机 端口 有 1Gbit/s 
和 10Gbit/s 两 种 速率 ， 分 别 使 用 网 线 和 光纤 连接 。 


与 52600T 类 似 ， 华 为 5500T 存 储 阵列 设备 与 主机 服务 器 的 连接 方式 有 两 种 : 
o 直接 连接 
o 通过 以 太 网 交换 机 连接 
通过 以 太 网 交换 机 连接 时 ， 建 议 您 提前 做 好 以 下 规划 : 
o 交换 机 网 段 的 规划 ， 并 确定 使 用 网 段 对 应 的 交换 机 端口 。 
o 交换 机 的 首尾 端 崩 常用 于 交换 机 之 间 的 组 网 ， 不 建议 用 于 主机 与 存储 设备 连接 。 
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化 为 存储 IP SAN 应 用 一 一 S5600T 


应 用 服务 器 


以 太 网 交换 机 1 


以 太 网 交换 机 2 
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35600T 








华为 55600T 存 储 阵 列 设备 控制 框 为 4U 盘 控 分 离 设计 ， 通 过 网 线 或 光纤 将 控制 框 iSCSI 主 
机 端口 与 应 用 服务 器 端口 进行 连接 ， 建 芯 业 务 通道 ， 实 现存 储 设 备 与 应 用 服务 器 之 间 的 数 
据 交换 。iSCSI 主 机 端口 有 1Gbits 和 10Gbit/s 两 种 速率 ， 分 别 使 用 网 线 和 光纤 连接 。 


与 ?2600T 类 似 ， 华 为 5600T 存 储 阵列 设备 与 主机 服务 器 的 连接 方式 有 两 种 : 

o 直接 连接 

o 通过 以 太 网 交换 机 连接 
通过 以 太 网 交换 机 连接 时 ， 建 议 您 提前 做 好 以 下 规划 : 

o 交换 机 网 段 的 规划 ， 并 确定 使 用 网 段 对 应 的 交换 机 端口 。 

o 交换 机 的 首尾 端 崩 常用 于 交换 机 之 间 的 组 网 ， 不 建议 用 于 主机 与 存储 设备 连接 。 
硬盘 框 级 联 和 管理 网 口 及 串口 管理 组 网 在 第 6 章 中 已 经 介绍 ， 这 里 面 不 在 重复 。 
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IP SAN 产 生 与 发 展 

IP SAN 组 成 和 组 网 连接 

iSCSI 协议 介绍 

FC 协 议 与 TCP 协 议 融 合 

华为 IP SAN 存 储 的 实现 与 应 用 
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思考 是 


IP SAN 与 FC SAN 的 主要 区 别 有 哪 些 ? 

. IPSAN 主 要 有 哪 几 部 分 组 成 ? 

. IP SAN 的 连接 方式 分 哪 几 种 ?各 有 什么 特点 ? 

.iSCSI 协 议 的 发 起 端 (Initiator) 和 目标 器 (Target) nr 
.描述 FCIP、iFCP 和 FCoE 协 议 的 特点 和 应 用 。 
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。 判断 题 


1. 存储 IP-SAN 组 网 主机 采用 以 太 网 卡 +Initiator 软 件 实现 方式 时 ，TCPHP 协 议 转 换 操 
作 由 以 太 网 卡 完成 ， 不 占用 主机 资源 。 (Tof F) 


。 ”多 选 题 K 
1， 以 下 对 FC SAN 与 IP SAN 比 较 ， 说 法 正确 的 是 : 


2. FC YAN 受到 光纤 传输 距离 的 限制 ， 而 IPSAN 理 论 上 是 无 限制 的 


B. FC SAN 网 络 因为 是 隔离 的 ， 不 与 外 网 直接 相连 ， 故 比较 安全 。 
C. FC SAN 投 资 成 本 高 ， 而 IPSAN 可 以 利用 现 有 TCP/IP 网 络 ， 投 入 相对 低 。 
D. FC SAN 维 护 相 对 简单 ， 而 IP SAN 基 于 TCP/IP 其 维护 比较 复杂 。 
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习题 答案 : 


o 判断 题 : 1.F 
o 多 选 题 : 1.ABC 
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HC1109106 华为 存储 部 署 及 运 维 管 
理 





(D 


v wv 
HUAWEI 


o0 3070 


W 
4 


2., 


HC1109106 
华为 存储 部 普及 运 维 
(ii: 





®© EiT 


学 习 完 本 课程 后 ， 您 将 能 够 : 
o 掌握 存储 初始 化 配置 流程 
o 掌握 存储 端 基础 配置 

o 掌握 主机 端 基础 配置 

o 掌握 存储 运 维 管理 方法 
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QER À 


. 存储 初始 化 配置 流程 
存储 端 基础 配置 
. 主机 端 基础 配置 


. 存储 运 维 管理 
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存储 系统 基础 配置 流程 


ets | — Canne | [omaa] Cou 


4 


arawon | > [emna] [ern ]— mn | CK 


M > eaa 








建立 连接 


emg 二 
NS 
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。 阵列 配置 过 程 严 格 按照 流程 顺序 进行 
。 初次 配置 结束 并 且 确 认 无 误 后 ， 请 使 用 信息 收集 工具 或 通过 ISM 保 存 配置 信息 
。 如 果 业 务 运行 后 需要 修改 配置 ， 请 使 用 信息 收集 工具 或 通过 ISM 保 存 配置 信息 


0 3120 


初始 化 配置 x 


各 所 有 设备 (1) 


S5500T 基础 配置 
EE G rapo 
DELY $ ç onge 


乓 设备 信息 创建 LUN 扫 由 
ELLE ORRITIESS 


à 7 ÊRES EUR 
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。 在 ISM 客 户 端 发 现 设备 后 ， 可 以 通过 初始 化 配置 向 导 对 存储 设备 进行 相关 设置 ， 包 括 设备 基 
本 信息 设置 、 设 备 时 间 设 置 、FC 端 口 信息 设置 、iSCSI 端 口 信息 设置 、 事 件 通 知 设置 、 
License 管 理 。 
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初始 化 配置 一 一 设备 基本 信息 À 


设备 名 称 S5500T 
U1-2-813R 
S5500T 


3.084 00GB 


Caii] 




















mno || unes 
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。 设备 名 称 
。 只 能 包含 半角 的 字母 、 半 角 的 数字 、“. 似 、“”、 “-” 和 简体 中 文字 符 ， 且 “-” 不 能 作 
为 首 字 符 ， 长 度 为 1 一 32 个 字符 (1 个 中 文字 符 占 3 个 字符 长 度 ) 。 
。 地 理 位 置 
。 只 能 包含 半角 的 字母 、 半 角 的 数字 、 空 格 、“.”、“”、 “” 和 简体 中 文字 符 ， 且 “-” 
和 空格 不 能 作为 首 字符 ， 长 度 为 ] ~32 个 字符 (1 个 中 文字 符 占 3 个 字符 长 度 ) 。 
。 密码 
o 密码 设置 需要 满足 如 涉 要 求 : 密码 为 8 到 16 位 的 字符 串 。 
o 密码 必须 包含 如 下 至 少 两 种 字符 的 组 合 : 
a /一 个 或 于 个 以 上 的 小 写字 母 。 
n 一 个 或 一 个 以 上 的 大 写字 母 。 
"个 或 一 个 以 上 的 数字 。 


D 一 个 或 一 个 以 上 的 特殊 字符 : ~, l, @, #, $, %, A, &, Fa ()， T; — 7 = 
了 +, \, | ， [， {, }, ], i i3 i E 15 <, LE | >, l, ?和 空格 。 


o 密码 不 能 和 用 户 名 或 者 用 户 名 的 倒 写 一 样 。 
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初始 化 配置 一 一 设备 时 间 管 理 À 


初始 化 配置 向 导 x 
备 基 sma 


UTC-+08-0004R , EE, MENTAL » SAFF) 
Asarum 
当前 客 尸 请 的 时 间或 时 区 同步 到 设备 。 
NTP 自 动 同步 
自动 同步 NTP 服 务 器 上 的 89 则 到 设备 。 
她 务 器 IP 地 址 
Asaa 
手动 修改 
手动 修 帮 设备 的 时 间或 时 区 。 
设备 时 间 
o HÉS SNA TAN 








ET 
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。 可 以 通过 以 下 三 种 方式 设置 设备 时 间 。 
o 选中 “同步 客户 端 时 间 ”， 同 步 当前 客户 端的 时 间 和 时 区 到 设备 。 
o ”选中 “NTP 自 动 同步 ”， 同步 NTP、 (Network Time Protocol) 服务 器 的 时 间 到 设备 


n 在 “服务 器 IP 地 址 ”文本 框 输入 NTP 服 务 器 的 IP 地 址 。 服务 器 iP 地址 支持 IPv4 
地 址 和 IPv6 地 址 。 


= 在 “同步 周期 6 小时) ”文本 框 中 设置 同步 服务 器 时 间 到 设备 的 周期 。 取 值 范 
围 为 12 一 240 的 整数 。 


o 选中 “手动 修改 ,手动 修改 设备 的 时 间 和 时 区 。 
" 在 “设备 时 间 ” 后 单 击 “ 修 改 ”。 系统 弹出 “修改 时 间 ” 对 话 框 。 
=。 在 “ 唱 期 ”区 域 框 修改 设备 的 显示 日 期 。 
as 在 ※ 时 间 ” 区 域 框 修改 设备 的 显示 时 间 。 
n 在 W 当 前 时 区 ”下 拉 列 表 框 选择 设备 所 在 的 时 区 。 
。 单 击 “确定 ”。 系统 弹出 “提示 ”对 话 框 。 


。 请 仔细 阅读 对 话 框 中 的 内 容 ， 确 认 后 单 击 “确定 ”。 系 统 弹出 “信息 ”对 话 框 
， 显 示 “ 操 作成 功 ”， 完成 修改 设备 时 间 的 操作 























x 
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FD HEC EE —FCE Ali D x 


初始 化 甩 置 向 导 


设置 选中 的 FC 主 机 浓 口 速 京 和 请 口 模式 ， 设 秆 前 请 确认 请 口上 无 业务 读 写 。 标 识 显示 带 侈 说明 : “(A 一 HO)” E 
示 当 前 端口 控制 器 ID 为 A, 钢 口 接口 模块 D 为 空 ( -表示 无 接口 模块 ID ) , AOIDH. 
FC 主机 沪 口 
eRe tpe Z 
标识 kmg ERAK 运行 模式 LI 运行 状 寿 y 

自 适 应 Y 
BEE 
自 适应 
自 适应 


选择 FC 链 路 二 二 BE 
并 配置 FC 参 ( 1 BER 

KI Œ.-H2) Be 
自 适 应 





| 
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。 FC 主机 端口 速率 
o 该 参数 表示 存储 设备 上 FC 主机 端口 的 速率 。 
。 对 系统 的 影响 
0 主要 包括 以 下 几 个 方面 : FC 主机 端口 速率 会 影响 性 能 ， 设 置 的 速率 过 低 ， 导 致 性 能 
达 不 到 预期 值 。 
0 该 参数 设置 错误 ， 会 导致 应 用 服务 器 与 存储 设备 之 间 通 信和 失败 。 
o 自 适 应 、2Gbit/s、4Gbit/s 和 8Gbit/s。 
。 取 值 原则 
o 该 参数 必须 和 应 用 服务 器 FC HBA 卡 端口 的 速率 设置 一 致 ， 否 则 会 造成 通信 失败 。 


o 在 设置 FC 主 机 端口 的 速率 时 ， 要 考虑 FC HBA 卡 端口 的 速率 。 如 果 FC nie 
设置 为 “ 自 适 应 ”， 则 存储 设备 上 FC 主机 端口 的 速率 也 可 以 设置 为 “ 自 适 应 ”; 但 不 
能 设置 为 主机 上 FC HBA 卡 不 支持 的 速率 值 。 


FC 端 昌 模式 
bs 当 存 储 设备 通过 光纤 交换 机 与 应 用 服务 器 连接 时 ， 建 议 选 择 交 换 机 模式 。 
D 当 存 储 设备 通过 FC 主 机 端口 与 主机 或 其 他 阵列 直 连 时 ， 建 议 选择 点 对 点 模式 
o 当 存 储 设备 与 应 用 服务 器 的 端口 处 于 同一 个 仲裁 环 网 时 ， 建 议 选择 仲裁 环 模式 
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初始 化 配置 一 一 iSCSI 主机 端口 | 


初始 化 配置 向 导 x 
PL PAISCSEEMUMONPIRtE. ERS. EEMU LENEE. FRETEMIRE: “OPO 
)” 表示 当前 端口 控制 器 为 A, AORORADH, MOIDHPO. 
iSCSI 主 机 篇 口 
smse 选中 数 -1 
标识 | Pyat | Lie] 


192168721 | 2552552550 


选择 iSCSI 链 = SOET 1921688100 2552552550 
路 并 配置 IP (A0.P2) 1921687201 2552552550 
地 址 以 及 路 mopa 


由 信息 (BoPg) 192168722 2552552550 
AZOA 

@op1) 

人 0P2) 

BoP3) 














选择 ijSCs3l 链 路 并 配置 |P 地 址 以 及 路 由 信息 ,配置 的 咏 地 址 在 服务 器 端 能 够 Ping 通 。 
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初始 化 配置 一 一 License 管理 ， 


初始 化 配置 向 导 
EitiâLicense 未 激活 Licens 


License 文 件 序列 叶 : HSLSN20120109000100 
ORENA: 2012-01-09 09:17:00 


License 信 息 列表 
软件 序列 号 210235G6GTZ0BB000003 


Uicense 文 件 的 格式 版 本 - 12 查看 License 
= L 

License 村 性 信息 通 立 

ern 可 通过 

运行 上 至 日 期 KA 活 License 


HESE LUNAN p 
SRE EM KA Àdicense 


HESR 异步 远程 复制 
运行 截至 日 期 - 永和 


特性 名 称 SmarCache 
运行 区 至 日 期- kA 


OCR 7 1 


2x0 选中 数 0 
Hisi 
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。 通过 License 管 理 功能 ， 可 以 浏览 License 信 息 千 导入 并 激活 License 文 件 。 


。 License 是 控制 产品 使 用 范围 、 功 能 、 期 限 的 许可 文件 。 在 以 下 情况 下 ， 存 储 系统 需要 导入 
相应 的 License 文 件 : 


o 使 用 SmartCache 功 能 ; 
o 使 用 虚拟 快照 功能 ; 
o 使 用 LUN 拷 贝 功 能 ; 
o 使 用 同步 远程 复制 功能 ; 
o 使 用 异步 远程 复制 功能 ; 
o 使 用 分 裂 镜像 功能 ， 
o 使 用 自动 精简 配置 功能 。 
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初始 化 配置 一 一 事件 通知 À 


邮件 通知 MAGN 。 系统 状态 通知  Syslogilan 


事件 通知 有 邮件 
通知 ， 短 消息 通 
知 ， 系 统 状 态 通 
A, Syslog 


4 FR 


Es wn 
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。 邮件 通知 
o 通过 该 操作 ， 系 统 以 电子 邮件 的 形式 将 选 定 级 别 的 告警 信息 发 送 至 指定 的 邮箱 中 。 


o 通过 该 操作 ， 可 以 将 指定 级 别 的 告警 信息 以 短 消息 的 形式 发 送 至 指定 手机 。 
。 系统 状态 通知 
oO 通过 该 操作 ， 设 置 一 个 发 送 周期 ， 邮 件 和 短 消息 会 按照 设 定 的 周期 被 发 送 到 远程 维护 
中 心 ， 便 于 监控 当前 的 系统 状态 
e Syslog 通 知 
o 通过 该 操作 可 以 将 指定 级 别 的 系统 日 志保 存 到 IP 地 址 指定 的 服务 器 的 特定 文件 夹 中 
， 供 第 三 方 软件 调用 ， 对 存储 系统 的 运行 状态 进行 监控 
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目录 


. 存储 初始 化 配置 流程 
存储 端 基础 配置 


. 主机 端 基础 配置 


. 存储 运 维 管理 
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创建 RAID 


在 块 存储 


池 中 创建 
RAID 
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。 存储 设备 支持 RAID 0、RAID 1, RAID 3, RAID:5 RAID 6, RAID 10 和 RAID 50， 可 以 根据 
不 同 的 应 用 创建 不 同 级 别 的 RAID 组 ， 各 种 RAID 组 适用 的 应 用 场景 如 下 所 示 : 


o RAIDO: 适用 于 以 读 写 性 能 为 第 二 要 求 ， 且 数据 保护 要 求 最 小 的 应 用 。 
o RAID 1: 适用 于 以 数据 安全 为 第 二 要 求 的 应 用 。 


o RAID 3: 适用 于 对 存储 性 能 数据 安全 和 存储 成 本 兼顾 的 应 用 。RAID 组 中 的 一 个 硬 
盘 作 为 校 验 盘 。 任 意志 个 成 员 盘 失效 ，RAID 组 降级 仍 能 正常 工作 。 


o RAID 5: 适用 于 对 存储 性 能 、 数 据 安全 和 存储 成 本 兼顾 的 应 用 。RAID 组 中 存在 分 散 
在 不 同 条 带 上 的 奇偶 校 验 数据 。 任 意 一 个 成 员 盘 失效 ，RAID 组 降级 仍 能 正常 工作 。 


o RAID 6: 适用 于 对 数据 安全 要 求 较 高 的 应 用 。 任 意 两 个 成 员 盘 失效 ，RAID 组 降级 仍 
能 正常 工作 。 


o _RAIDA10: 适用 于 既 有 大 量 数据 需要 存 取 ， 同 时 又 对 数据 安全 性 要 求 严格 的 应 用 ， 如 
银行 、 金 融 、 商 业 超市 、 仓 储 库房 、 各 种 档案 管理 等 。 


o RAID 50: 适用 于 既 有 大 量 数据 需要 存 取 ， 同 时 对 数据 安全 性 要 求 较 高 的 应 用 。RAID 
50 是 RAID 5 与 RAID 0 两 种 技术 的 结合 ， 至 少 需要 6 个 空闲 盘 。 


。 创建 RAID 组 时 ，RAID 组 成 员 盘 的 类 型 应 保持 一 致 。 


*、 如 果 存 储 系统 中 存在 3ATA 硬 盘 和 NL SAS 硬 盘 时 ， 可 以 选择 3SATA 硬 盘 和 NL SAS 硬 盘 作为 同 
一 个 RAID 组 的 成 员 盘 。 


0 3210 


创建 热 备 盘 À 


热 备 盘 管 理 


sw EE. CRUSLNME. SAT PORAR EN , NME SE MAN ERAAN, MERE MENT. 


匀 选 空闲 盘 后 上 
要 点 者 竺 头 移 
DETTE 


ss ems (ist 


2780068 ER 
2780068 ER 
2780068 EX 
2780068 ŒX 
2780068 ER 
140008 EW 


CE 
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。 热 备 盘 管理 


o 热 备 盘 是 被 指定 用 于 替代 RAID 组 内 故障 成 员 盘 的 硬盘 ， 完 成 的 任务 是 承载 故障 硬盘 中 
的 数据 。 通 过 热 备 盘 管理 可 以 将 空闲 盘 设 置 为 热 备 盘 或 将 热 备 盘 设 置 为 空闲 盘 。 


。 设置 热 备 盘 
0 在 导航 树 上 ， 展 开 存储 设备 下 的 “存储 资源 ”节点 


o 单 击 “ 块 存储 池 ” 节 点 。 

o 在 右 侧 信 息 展示 区 选择 ,“ 热 备 盘 管 理 ”。 系统 弹出 “ 热 备 盘 管 理 ” 对 话 框 。 
0 在 “空闲 盘 ” 侈 域 框 中 ， 勾 选 需要 设置 为 热 备 盘 的 空闲 盘 。 

o 单 击 图 标 ,/ 空闲 盘 移 动 到 “ 热 备 盘 ” 区 域 框 中 。 


o Ah MEN 系统 弹出 “执行 结果 ”对 话 框 ， 提 示 操 作成 功 。 

o 单 击 “ 天 闭 ”。 

取消 热 备 盘 

0 在 导航 树 上 ， 展 开 存储 设备 下 的 “存储 资源 ”节点 

5 Ah AFRE To 

在 右 侧 信息 展示 区 选择 “ 热 备 盘 管理 ”。 系统 弹出 “ 热 备 盘 管理 ”对 话 框 。 
o 在 “ 热 备 盘 ” 区 域 框 中 ， 勾 选 需要 取消 的 热 备 盘 。 


口 
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创建 LUN 


创建 LUN 
RAID 组 
名 称 
RAIDERS) 


最 大 连续 空闲 容 量 339.00GB 


LUN 


toRFRÈRESTLUN, MAHLUNS RENTE. FRIREMREMENSE 
“001”. “_002" #RESSTLUN. ÆXÉRPAILUNS RS NOT. 


LUN001 


创建 LUN 的 时 候 要 

考虑 好 分 条 深度 的 

大 小 ， 创 建 好 后 不 HF KE) 
能 再 修改 电导 控制 器 





mo | amw 
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。 名 称 


o 名 称 不 能 重复 ， 只 能 包含 半角 的 字母 、 半 角 的 数字 、“”、 “”、“-” 和 简体 中 文 
字符 ， 且 “-” 不 能 作为 首 字符 ,发 度 为 1~32 个 字符 (1 个 中 文字 符 占 3 个 字符 长 度 ) 


o 


。 分 条 深度 


5 新 建 LUN 的 分 条 深度 分 条 深度 是 指 在 使 用 分 条 数据 映射 的 硬盘 设备 中 ， 条 带 内 的 块 
大 小 。 也 指 在 硬盘 设备 的 单个 成 员 盘 区 中 ， 连 续 编 址 的 虚拟 硬盘 块 映射 到 连续 编 址 的 
块 的 大 小 。 分 条 深度 取 值 包括 “4 KB” | “8 KB”、 “16 KB” | “32 KB”、“64 
KB”、 “128KB”、“256 KB” 和 “512 KB”8 种 。 


o 由 于 分 条 深度 影响 到 |/O 〇 性 能 ， 因 此 在 不 同 的 应 用 场景 下 应 适当 选择 分 条 深度 大 小 。 
例如 :，” 当 系统 应 用 于 存储 顺序 数据 较 多 的 情况 下 ， 如 存储 媒体 数据 ， 建 议 设置 较 大 的 
分 条 深度 。 推 荐 设置 为 44 KB。 当 系统 应 用 于 存储 随机 数据 较 多 的 情况 下 ， 如 存储 事 
务 处 理 数据 ， 建 议 设置 较 小 的 分 条 深度 。 推 荐 设置 为 32 KB。 


。 归属 控制 器 


o 为 下 实现 控制 器 A 和 控制 器 B 的 负载 均衡 ， 建 议 将 存储 系统 中 的 LUN 分 配给 不 同 的 控制 
器 。 说 明 : 当 LUN 所 属 RAID 组 的 成 员 盘 为 9As 盘 或 FC 盘 时 ，LUN 的 归属 控制 器 可 以 
选择 为 “控制 器 A”、 “控制 器 B” 或 “自动 选择 ”。 当 LUN 所 属 RAID 组 的 成 员 盘 为 
其 他 类 型 时 ，LUN 的 归属 控制 器 只 可 以 选择 “控制 器 A” 或 “控制 器 B”。 
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创建 主机 组 x 


创建 主机 组 





HostGroup001 











aew RAC) “DH 
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。 在 “主机 组 名 称 ”文本 框 中 输入 新 创建 主机 组 的 名 称 。 
。 名 称 不 能 与 已 有 的 主机 组 名 称 重复 

。 只 能 包含 半角 的 字母 、 半 角 的 数 守 、`“”、“_”、 “” 和 简体 中 文字 符 ， A “-， 
能 作为 首 字符 。 


。 长 度 为 1~32 个 字符 (1 全 中 文字 符 占 3 个 字符 长 度 ) 。 


à 
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创建 主机 x 


创建 主机 


设置 主机 基本 信息 。 
主机 组 名称 HostGroup001 


创建 主机 


请 志和 排 可 用 的 SCSI 尼 动 器 ， 修 也 可 以 外 陵 新 的 SCSIB 动 器 。 
iSCSIB 动 器 


ign 200808, om huawei oceanstor210000223101bee7 notcontig 


han 200806 pam huswet oceanstor 210000223101bee7 notcontig 


便 息 确 放 后 SR zx". 
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。 在 “主机 名 称 ” 文 本 框 中 输入 新 创建 主机 的 名 称 。 
。 名 称 不 能 重复 。 
。 只 能 包含 半角 的 字母 、 半 角 的 数 守 、Y“”、“_”、“-” 和 简体 中 文字 符 ， 且 “-? 
不 能 作为 首 字符 。 
o 长 度 为 1~32 个 字符 (1 全 中 交 字 符 占 3 个 字符 长 度 ) 。 
。 在 “操作 系统 类 型 ”后 的 下 接 列 表 中 选择 主机 的 操作 系统 类 型 。 
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3 Gras) 
@ 555007 
Gens 
anwr 
[的 设备 信息 
Əmma 
已 UN 
Gers 
G Smanc acneïs 
PEL TS 
= À aea 
un i 
ua (LUN MERE Ba 
全 EN 
-aeu 
à snae 
gar 
CELT] 
Ezr» 
Q ss 


主机 LUNID | 23 
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。 私有 LUN 不 能 映射 给 主机 。 
。 LUN 不 能 映射 给 默认 主机 组 下 的 主机 。 


。 创建 LUN 了 映射 可 以 从 存储 资源 ->LUN 里 面 去 操作 配置 ， 也 可 以 通过 映射 主机 组 -> 主机 -> 添加 
LUN 映 射 操作 。 
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pere 
5 [后 设备 信息 
ELLES 
EL 
oeus 
es HOUR 
wao 
Drez 
5 Əmma 
BUN 
Gers 
G SmanCache 
cd ra 
À saeg 
ere 
OLUNAR 
LE 1] 


DAVTL 
Host004 
DJ-Host002 
DJ-Host001 
nsan 


hosti 


REFE 


TENY 7 CRE EMPaIN FABES ; Su 


Ro RoRo 


ms uR | mat 
5、 选 择 启动 器 


Windows 





em:10 ePR ! 
ER 
2100002483 
2100002471 
lan1991-05c. iSCSI 
> 
Dt ISCSI HR 
yulei iscsi 来 连接 
iqn 2006-08 ¢ iSCSI 
bai 
ian.2006-08 c iscsi 


jiqn 1991-05 iSCSI 

















配置 启动 器 可 通过 “映射 ”->“ 主 机 组 ”<->“ 主 机 ”选项 进去 配置 ， 也 可 以 通过 “映射 ”- 


>“ 启 动 器 ”配置 。 
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CLI 管 理 概述 


。 通过 管理 串口 
。 通过 管理 网 口 





| ACEL 


XFO SEO EV FUO HŽ 帮助 
ols 513] oa] | 


Linux Login: admin 


每 秒 位 
数 选择 
115200 





、 输 久 存储 设备 
串口 登录 的 参数 设置 的 管理 用 户 名 
和 密码 
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。 在 不 知道 设备 管理 |P 的 时 候 ， 可 以 通过 串口 进 关 管理 界面 ， 查 看 管理 |P。 连 接管 理 串口 需要 
使 用 DB9 转 RJ45 的 串口 线 ， 设 备 的 管理 串口 的 具体 位 置 参考 产品 手册 。 
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命令 行 工 具 登 录 


LR PuTTY Configuration 


| Basic options for your PuTTY session 


Specily your connection by host name of IP address 


Host Name (or IP address) Port 在 Host Name his 
= g 入 管理 网 口 的 IP 地 
Chm Cl Chon C 址 ， 端 口号 默认 为 


Load, save or delete a stored session 22 
Saved Sessions 








Defaut Setting: 
À 129.16.101.26 - PuTTY 








Close window on exit 
C Aways C Never ( Onky on clean ext 











输入 登录 的 用 
户 名 和 密码 
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常用 的 命令 行 工 具有 Putty 和 ssh client. 





329 

















常用 命令 


showctrlinfo ”查看 控制 器 信息 
showsys 查看 系统 信息 


Showctrlip 查看 管理 IP 
showallver 查看 版 本 信息 


chgctrlip 修改 管理 IP 


exit 系统 退出 命令 
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。 可 以 使 用 tab 键 补 全 命令 
。 可 以 在 命令 行 后 添加 help 查 看 帮助 信息 
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© EX À 


. 存储 初始 化 配置 流程 
. 存储 端 基础 配置 


. 主机 端 基础 配置 
3.1 Windows 服 务 器 和 存储 的 连接 
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Initiator 软 件 获取 与 安装 


spa 不 要 勾 选 
“Microsoft MPIO 
Multipathing 


| Moreno CSI niaa vd be upgraded bom 20 Support for SESK 


Microsoft iSCSI Initiator 





Bicreseft iSCSI Initiater Installati m 
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e 在 Windows 应 用 服务 器 上 通过 “Microsoft iSCSI Initiator” 软件 配置 目标 器 的 IP 地 址 、 用 
户 名 和 密码 ， 可 以 建立 存储 设备 和 应 用 服务 器 的 连接 。 


a “Microsoft iSCSI Initiator” 安装 程序 可 从 微软 网 站 


a hite://www.microsoff.cona 士 下载 。 请 使 用 2.01 及 以 上 版 本 。 下 载 完成 后 双击 安装 
程序 即 可 开始 安装 。 


o 如 果 应 用 服务 器 和 存储 的 连接 存在 多 条 路 径 ， 需 要 安装 华 赛 研发 的 UltraPath 软 件 ， 
在 安装 “Microsoff SCSI Initiator” KA, FE “Microsoft MPIO 
Multipathing Support for iSCSI? 。 


0 安装 完成 后 ， 请 重新 启动 应 用 服务 器 。 
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Windows 平台 下 iSCSI 服 务 操作 


与 计算机 管理 


思 文件 EE) MO 查看 600 WHW 








e» OEB OM| > m ıı m 


计算 机 管理 本 地 ) 


65 索引 服务 


处/ 
Sty Kerberos Key Distribution Center 
License Logging 
Mo Logi cal Disk Manager 
Mo Logi cal Disk Manager Administrat... 


oft i I iator Service 
oi crosoft Software Shadow Copy P. 
y NenServi ce 
og Net Logon 
gNet. Tep Port Sharing Service 
Ryletlleeting Remote Desktop Sharing 
So Hetwork Connections 
Ry Hetwork DDE 
Ry Hetwork DDE DSDN 
Network Location Awareness NLA) 
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管理 iSCSI Initiatori Rg 





o 在 桌面 左下 角 点 击 “ 开 始 ” ; 
o 在 弹出 的 导航 栏 点 击 “ 管 理工 具 ”N; 
0 点 击 “ 管 理工 具 ” 下 的 “服务 9 名 图 所 示 。 


iSCSI Initiator hRg Zar Microsoft iSCSI Initiator Service, 


如 图 红色 虚 框 所 表示 。 


双击 Microsoft iSCSI Initiaiforservice ， 弹 出 的 窗口 如 图 所 示 。 在 此 可 以 对 该 服务 进行 启动 、 


停止 等 操作 和 配置 。 
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服务 器 启动 器 名 称 ， 


iSCSI Initiator Properties 
1、 点 击 


inifiator 图 标 al | Discovery | Targets | Persistent Targets | Bound Volumes/Devices 


© The iSCSI protocol uses the following information to uniquely 
En identify this initiator and authenticate targets. 


ji 2、 占 Initiator Node Name: iqn. 1991- 
Micr osoft ` 点 击 05.com microsoftzwx15858z china huawekcoli 


General > 
I Initiator 
To rename the initiator node, click Change. 


To authenticate targets using CHAP, click Secret to 
specify a CHAP secret 


To configure IPSec Tunnel Mode addresses, click 
Tunnel 


4、 启 动 器 名 称 


Initiator Node Name Change 
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这 里 的 启动 器 名 称 要 配置 在 存储 设备 上 的 启动 器 配置 ， 然 后 再 在 创建 主机 的 时 候 ， 将 该 启 
动 器 配置 给 主机 。 建 立 存 储 上 创建 的 主机 到 服务 器 之 间 的 映射 关系 。 


Initiatorèc Æ 


iSCSI Initiator Properties 


Target Portals 


Add Target Portal 


Type the IP address or DNS name and socket number of the portal you 
want to add. Click Advanced to select specific settings for the discovery 
session to the portal. 


1P address or DNS name: Port: 
| 


3260 


IP 地 址 为 存储 的 = 
= 





General! Discovery Targets | Persistent Targets | Bound Volumes/Devices 


iSCSI Initiator Properties 


General! Discovery Targets | Persistent Targets | Bound Volumes/Devices 
Target Portals 


ISNS Servers 


Name 
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连接 ; 


。 如 果 存 储 和 服务 器 之 间 是 通过 FC HBA 卡 连接 , “不 需要 此 配置 步骤 ， FC 能够 自动 发 现 并 建立 


。 如 果 是 通过 IP 网 络 连 接 ， 则 要 进行 如 图 的 IP 地 址 配置 ，IP 地 址 为 存储 设备 的 业务 口 IP 地 址 。 
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Initiator 连 接 


iSCSI Initiator Properties 


General Discovery, Targets | Persistent Targets | Bound Volumes/Devices 


Select a target and click Log On to access the storage devices for that 
target. Click details to see information about the sessions, connections and 
devices for that target. 


Targets: 
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。 在 建立 服务 器 到 存储 之 间 iSCSl 连 接 之 前 ,。 需 要 在 存储 端 配置 好 主机 ， 映 射 LUN, 并 给 主机 指 
定 服务 器 的 启动 器 名 称 。 击 LogON ,建立 服 务 器 到 存储 之 间 的 连接 。 然 后 服务 器 就 能 发 现 磁 
盘 。 
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发 现 磁盘 


CHARS 

| 加 文件 四 REO EV SOW ”帮助 中 

e» Amem Bx Egan 

计算 机 管理 本地) 
RIA 











eraa 


欢迎 使 用 磁盘 初始 化 和 转换 向 导 


区 DLR ， 并 格 空 的 基本 磁盘 转换 


et PE EE d SL 


动 计算 机 就 扩展 单个 磁 


=] 
= 
= 
= 
= 
= 
= 
4 


将 磁盘 转 执 为 动态 后 ， 您 只 能 在 该 磁盘 的 卷 士 使 用 
Windows 2000 或 更 新 版 本 的 Finder t 


要 继续 ， 请 单 击 “ 下 一 步 ”。 


= Eu | 
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当 建立 连接 后 ， 打 开 计 算 机 管理 ， 进 入 磁盘 管理 # 会 自动 跳出 一 个 磁盘 初始 化 向 导 。 
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。 jhi 
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LAJ 


初始 化 磁盘 


磁盘 初始 化 和 和 转换 向 导 


选择 要 初始 化 的 磁盘 
磁盘 必须 经 过 初始 化 ， 逐 辑 磁盘 管理 器 才能 访问 。 
磁盘 初始 化 和 转换 向 导 [x] 


HAE AE 
Es da GRR ERARIS. 多 


站 磁 参 5 


和 ERRER 正在 完成 磁盘 初始 化 和 转换 向 导 以 
H2 22 
磁盘 23 全 5 您 已 成 功 地 完成 了 磁盘 初始 化 和 转换 向 导 。 


诬 盘 初始 化 和 转换 向 导 [x] 


您 已 选择 下 列 设 置 
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初始 化 向 导 ， 一 步 一 步 完成 磁盘 初始 化 操作 却 完成 后 就 能 在 磁盘 管理 中 发 现 磁盘 。 


UltraPath for Windows 安 装 前 准备 


系统 环境 存储 协议 UltraPath 


一 


4 兼容 的 CSI Initiator ~ 
; 老 版 本 的 处 理 Ç 








。 确认 是 否 已 安装 MicrosoftiSCSI Initiator 

。 不 能 安装 CsI 自 带 的 多 路 径 驱动 程序 。 

。 删除 iSCSI 启动 器 中 连接 

。 关闭 HBA 卡 自 带 的 Failover 和 Failback 功能 
。 服务 器 上 安装 相同 HBA 卡 

。 印 载 旧 版 本 再 重新 安装 

。 存储 系统 正确 配置 端口 模块 
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步骤 1 查询 当前 应 用 服务 器 的 Windows 操作 系统 的 版 本 及 补丁 是 否 满足 安装 UltraPath for 
Windows 的 要 求 。 


步骤 2 确认 使 用 于 当前 Windows 版 本 的 UltraPath for Windows 安装 包 与 应 用 服务 器 的 
Windows 操 作 系 统 类 型 相 匹 配 。 


步骤 3 确认 应 用 服务 器 上 没有 安装 老 版 本 的 UltraPath for Windows， 如 果 已 安装 有 老 版 本 
的 UltraPath for Windows， 请 先 正 确 和 拖 载 老 版 本 的 UltroaPath for Windows. 


步骤 4 如 果 安 装 UltraPath for Windows 的 应 用 服务 器 是 Windows 2000 操作 系统 ， 请 确认 
应 用 服务 器 上 已 安装 Windows 2000 操作 系统 安装 光盘 附带 的 SUpport Tools, 


步骤 5 如 果 应 用 服务 器 上 安装 有 Microsoff iSCSI Inifiafor， 请 参见 相关 材料 确认 应 用 服务 器 
确认 Microsoft iSCSI Initiator 是 否 满足 安装 UltraPafth for Windows 要 求 。 


步骤 6 如 果 应 用 服务 器 上 安装 有 FC HBA 卡 ， 请 参见 相关 文档 确认 HBA 卡 是 否 满 足 安 装 
UltraPathfor Windows ER. 


多 路 径 软件 获取 方式 : 
o 个、 华为 官方 网 站 下 载 ， 
人 2、 随机 光盘 ; 

多 路 径 软件 兼容 性 查询 方式 : 

在 发 布 的 多 路 径 下 载 软件 包 中 ， 有 对 该 版 本 多 路 径 软件 兼容 性 的 说 明 ， 请 仔细 检查 。 
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多 路 径 安装 for windows + 





Welcome to the Install Wizard for UltraPath 
for Windows 


we ec) Ward wi instal Ue Path for Windows on your 
er. To contra, cick Next 





SD 文件 MMA HU wow MH 
++ 0m F8 2 SRE 











e i a 
D nanienas 
uara ay (COM 和 LPT 
E & SAN Disk Manager 9 ien 
a p 服务 和 应 用 程序 + sus 
4 nl »itt 
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步骤 1 将 UltraPath for Windows 的 安装 程序 拷贝 到 应 用 服务 器 上 
o 在 安装 UltraPath for Windows 前 入 请 先 断 开 对 映射 磁盘 的 一 切 应 用 。 
o 在 安装 UltraPath for Windows 前 ， 先 断 开 应 用 服务 器 与 存储 系统 的 连接 。 


步骤 2 根据 操作 系统 类 型 选择 安装 程序 ， 运 行 可 执行 文件 ， 系 统 进入 UltraPath for 
Windows 安装 界面 。 如 左上 图 所 示 


步骤 3 单 击 “Next”， 系 统 进入 “UltraPath for Windows - Install Wizard” 界面 。 

步骤 4 在 “User Name” à “Organization” 中 分 别 输入 用 户 和 组 织 名 称 。 

步骤 5 MH “Next, AMAHA “Ready to Install the Program” 界面 。 

步骤 6 单 击 “Insfell” ， 了 系统 进入 “Installing UltraPath for Windows” 界面 ， 显 示 安 装 进 
度 。 如 果 没 有 设置 忽略 驱动 程序 签名 ， 系 统 会 弹出 “安全 警报 - 驱动 程序 安装 ”对 话 框 。 
单 击 “ 是 " 

步骤 7 安装 完成 ， 如 左下 图 所 示 。 

步骤 8 单 击 “Finish” ， 系 统 弹 出 “UltraPath for Windows Installer Information” 对话 框 。 
步骤 9 单 击 “Yes”， 应 用 服务 器 重启 。 

步骤 10 查看 UltraPath for Windows 是 否 安装 成 功 。 


o 单 击 “ 开 始 ” ， 选 择 “ 所 有 程序 > UltraPath for Windows > Launch. 


多 路 径 安装 for windows * 





Welcome to the Install Wizard for UltraPath 
for Windows 


The ret) Wizard wi instal Uy Ph for Windows 


n your 
mputer. To contra, chck Next 


WARNING: The program i protected by copynght law and 





DAO MMA aY wow MHA 
e-+ OFER SRE 











id CRUma320 SCSI Host Adapter 
IdPCI-X Uitra320 SCSI Host Adapter 


PARLE] 
L'AECTET LE 
uaru 





ay COM 和 LPT) 
#& SAN DiskManager | W 9 计生 机 

: D 了 服务 和 应 用 程 席 < Reas 

4 bal » x 





P- 








e UPManager.exe” , ÆÆUltraPath for Windows Manager TE, 


。 也 可 以 执行 以 下 步骤 查看 UltraPath for Windows 是 否 安装 成 功 。 
o 选中 “我 的 电脑 ”图 标 后 ， 单 击 鼠 标 右 键 ， 在 弹出 的 快捷 菜单 中 选择 “管理 ” 
0 在 “计算 机 管理 ”界面 左 侧 导 航 树 中 ， 选 择 “ 系 统 工具 > 设备 管理 器 ”。 


0 在 界面 右 侧 展开 “SC5h 和 RAID 控制 器 ”节点 ， 如 果 安 装 成 功 则 显示 “Multi- 
PathSupport”， 如 有 图 所 示 。 
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文件 四 MA sty MH 
+ ses 3 























未 安装 多 路 径 UltraPath 已 安装 多 路 径 UltraPath 
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安装 多 路 径 软 件 UltraPath 前 磁盘 状态 : 

o 选中 “我 的 电脑 ”图 标 后 ， 单 击 鼠 标 右键 ， 在 弹出 的 快捷 菜单 中 选择 “管理 ”。 

o 在 “计算 机 管理 ”界面 左 侧 导航 树 中 ， 选 择 “ 系 统 工具 > 设备 管理 器 ”。 

0 在 界面 右 侧 展 开展 开 磁 盘 控 制 器 。 未 安装 多 路 径 软 件 UltraPath 时 磁盘 如 左 图 所 示 ， 
每 一 条 应 用 服务 器 至 LUN 的 链 路 均 显 示 为 一 个 磁盘 ; 点 击 开 始 > 管理 工具 > 计算 机 管理 
> 磁盘 管理 ， 可 以 看 到 磁盘 数量 亦 与 设备 管理 器 所 显示 一 致 。 

安装 多 路 径 软 件 UltraPath 后 ,还 需 在 应 用 服务 器 端 扫 描 存储 系统 映射 给 应 用 服务 器 的 LUN: 

重复 步骤 1-3， 选 中 /磁盘 驱动 器 ”， 单 击 自 标 右键 ， 在 弹出 的 快捷 菜单 中 选择 “扫描 检测 

硬件 改动 ”。 

系统 扫 摘 到 由 于 元 余 连接 而 产生 的 磁盘 驱动 器 以 及 通过 UltraPath for Windows 屏蔽 掉 LUN 
影 现象 后 的 虚拟 的 LUN 映 射 磁盘 驱动 器 ， 如 右 图 所 示 。 


342 [] 


Windows 平台 文件 系统 


"文件 系统 - f "存储 形式 
"EAT 。 基本 磁盘 ; AS 


。 HSE. GE 


"分 区 形式 


MBR ( 主 启动 记 
录 ) 分 区 表 


。 GUID 分 区 表 
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。 分 区 形式 是 指 操作 系统 用 于 组 织 磁 盘 上 的 分 区 的 方法 。 主 要 有 MBR 分 区 表 和 CUID 分 区 表 。 
o 主 启 动 记 录 (MBR) 磁盘 分 区 : 支持 最 大 卷 为 2 TB (terabytes) 并 且 每 个 磁盘 最 多 有 
4 个 主 分 区 (或 3 个 主 分 区 ，1 众 扩展 分 区 和 无 限制 的 逻辑 驱动 器 ) 
a GUD SER (CPT) 磁盘 分 区 :支持 最 大 卷 为 18 EB (exabytes) 并 且 每 磁盘 最 多 有 
128 个 分 区 。 


。 所 有 基于 x86 和 基于 x64 的 计算 机 都 使 用 称 为 主 启动 记录 (MBR) 的 分 区 形式 。MBR 是 未 安 
装 带 有 Service Pack 1 (SP1) 的 Windows Server 2003 的 基于 x86 的 计算 机 上 唯一 可 用 的 
分 区 形式 ; 基于 Itanium 的 计算 机 、 运 行 带 有 Service Pack 1 (SP 1) 的 Windows 
Server 2003 的 基于 x86 的 计算 机 ， 以 及 基于 x64 的 计算 机 ， 都 可 以 使 用 MBR 分 区 形式 和 
GUD 分 区 表 (GPT) 分 区 形式 。“ 和 磁盘 管 理 ” 将 使 用 主 启动 记录 分 区 形式 的 磁盘 标记 为 
MBR 磁盘 ， 而 将 使 用 GUID 分 区 表 分 区 形式 的 磁盘 标记 为 GPT 磁盘 。 


。 基本 磁盘 和 基本 卷 ， 基 本 磁盘 是 包含 主 分 区 、 扩 展 分 区 或 逻辑 驱动 器 的 物理 磁盘 。 基 本 磁 
盘 上 的 分 区 和 逻辑 驱动 器 称 为 基本 卷 。 只 能 在 基本 磁盘 上 创建 基本 卷 。 


o 对 于 主 启动 记录 (MBR) 磁盘 ， 可 以 最 多 创建 四 个 主 分 区 ， 或 最 多 三 个 主 分 区 加 上 一 个 
扩展 分 区 。 在 扩展 分 区 内 ， 可 以 创建 多 个 逻辑 驱动 器 。 


o 对 于 GUD 分 区 表 (GPT) 磁盘 ， 最 多 可 创建 128 个 主 分 区 。 由 于 GPT 磁盘 并 不 限制 
四 个 分 区 ， 因 而 不 必 创 建 扩展 分 区 或 逻辑 驱动 器 。 
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转换 GPT 磁 盘 





~ 


LUN 越 来 越 
大 ， 记 住 2TB 
这 个 关键 值 
D / 


J 











` DILRLLE EL Cie Es © g anma 








LUN 小 于 2TB 的 操作 








RO MW MEN my y 








LUN 大 于 2TB 的 操作 
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。 MBR 分 区 方式 仅仅 支持 每 磁盘 4 个 分 区 和 最 大 2TB 的 磁盘 容量 。 所 以 当 映 射 给 主机 的 LUN 容 
量 大 于 2TB 时 ， 需 要 将 其 转换 成 GPT 人 磁盘 才能 正常 使 用 。 


o 1、 进 入 “计算 机 管理 ”对 话 框 匀 在 桌面 上 右键 单 击 “ 我 的 电脑 ”图 标 ， 在 弹出 的 快 


捷 菜 单 中 选择 “管理 ”。 


o 2、 在 导航 树 上 的 “磁盘 管理 基点 下 ， 扫 描 应 用 服务 器 上 的 新 增 的 逻辑 磁盘 。 
n oj 在 “计算 机 管理 ”对 话 框 的 导航 树 上 ， 选 择 “ 存 储 > 磁盘 管理 ”。 
sb) 右键 单 击 “ 磁 盘 管 理 ”， 在 弹出 的 快捷 菜单 中 选择 “重新 扫描 磁盘 ”。 


a 扫描 完成 后 在 右 侧 的 区 域 可 以 看 到 新 增 的 逻辑 磁盘 (以 “磁盘 2” 为 例 进行 说 
H) ， 如 车 图 中 红色 区 域 所 示 (硬盘 大 小 不 同时 显示 稍 有 差异 ) o 


口 3、 对 新 增 的 逻辑 磁盘 进行 初始 化 。 


a /名 选中 “磁盘 2” (如 左 图 中 红色 区 域 所 示 ) ， 单 击 鼠 标 右键 ， 并 在 弹出 的 快捷 
菜单 中 选择 “初始 化 磁盘 ”。 


sb) 在 弹出 的 “初始 化 磁盘 ”对 话 框 中 ， 勾 选 需要 初始 化 的 还 辑 磁 盘 并 单 击 “ 确 


= 7 


Æ 


a 等待 1 分 钟 ， 当 “磁盘 2” 的 状态 变 为 “联机 ”时 ， 初 始 化 成 功 。 
o 4、 当 新 增 的 逻辑 磁盘 大 于 2 TB 时 ， 请 将 逻辑 磁盘 转化 为 GPT 磁 盘 ， 否 则 该 逻辑 磁盘 将 


无 法 被 访问 。 


a oj) 选中 “磁盘 2” (以 磁盘 2 为 例 ) ， 单 击 鼠 标 右键 ， 并 在 弹出 的 快捷 菜单 中 选 


择 “ 转 


转换 GPT 磁 盘 


LUN 越 来 越 
大 ， 记 住 2TB 
Sv mo av my mwy i 这 个 关键 值 
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SINA |©KmE à) a20 基本 mr tent nsa 
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= 化 成 GPT 磁 盘 ” (如 右 图 中 红色 区 域 所 示 ) 。 
a 转化 成 功 后 ， 逻 辑 磁 盘 将 由 两 个 分 区 转化 为 一 个 分 区 。 
o 5、 对 逻辑 磁盘 进行 分 区 并 格式 化 % 


= ”如果 在 Windows SerYSrNW2003 图 形 界 面 下 灰 化 了 转化 CGPT 磁 盘 的 功能 ， 可 使 用 
系统 自 带 的 diskpar#exE 工 具 ， 转 化 之 后 可 以 对 磁盘 进行 分 区 操作 。 


。 注 : 在 磁盘 分 区 不 大 于 2TB 的 情况 下 ， 推 荐 使 用 基本 磁盘 形式 创建 磁盘 分 区 。 


0 30 





© 目录 


. 存储 初始 化 配置 流程 
. 主机 端 基础 配置 


3.1 Windows 服 务 器 和 存储 的 连接 


3.2 Linux 服 务 器 和 存储 的 连接 





4. 存储 运 维 管理 
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Initiator 软 件 获取 


对 于 iSCSI 连接 ， 安 装 多 路 径 软件 前 需要 先 安装 Initiator 软 件 
Open-iSCSl 是 用 于 RedHat Linux SAISUSE Linux 10 及 更 高 版 本 的 Linux 系 统 与 IP 
SAN 设 备 对 接 的 Initiator 软 件 。 

获取 途径 K 

o 操作 系统 安装 光盘 

o 官方 网 站 : http://www.open-iscsi.org 
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。 获取 Open-iSCsl 软 件 的 方法 有 : 
o 从 安装 光盘 中 查找 open-iscsi 软 件 ; 
o jf htip://www.open-iscsi.org/ 官方 网 站 下 载 。 
e Open-iSCSslI 在 Linux 下 的 配置 ,以 SUSE 10.0 为 例 : 
o 以 root 用 户 登 录 SUSE 应 用 服务 器 。 
0 启动 iSCSI 服务 。 
o #/etc/init.d/open-iscsi start 


o (NM) 修改 启动 器 的 名 称 。 


0 #70 


Initiator 软 件 安 装 


Terminal 


Iemminal Tabs Help 
R 
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ô 
e Open-iSCSIÆLinux TI ZE, asus 10020 
D 输入 命令 yast， 弹 出 “YaST” 界 TN 

在 界面 左 侧 选择 “ Sofware, ”移动 光标 在 界面 右 侧 选 择 “Software 


Management” , # “Ent 

按 快捷 键 “Alt+S” 搜 索 Os “iSCSI” 的 文件 ， 按 快捷 键 “Alt+O” 确 定 操作 。 
选择 安装 Open-iscsi， Mate “AHHA” MEIRI 

a re 包 。 


口 


口 


口 


口 


N 
Q 
N 
Q 
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Initiator 软 件 配置 登录 


。 配 置 目标 器 的 IP 地 址 并 登录 目标 器 。 


a 运行 iscsiadm -m discovery -t st -p XXX.XXX.XXX.XXX 命 令 添 加 目标 器 。 以 iSCSI 主机 


端口 的 IP 地 址 为 192.168.123.100 为 例 进行 描述 。 
# iscsiadm -m discovery -t st -p 192.168.123.100 


Y 
。 运行 iscsiadm -m node -| 命令 登录 目标 器 。 ~ 


# iscsiadm -m node -l 
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设置 应 用 服务 器 通过 此 目标 器 端口 持续 访问 存储 设备 。 

在 /etc 目 录 下 ， 运 行 viiscsid.conf 命 令 , FII “iscsid.conf” 文 件 。 
按键 进入 编辑 模式 ， 编 辑 “iscsid.conf 文件 。 

将 node.start 设 置 为 “automoatic”” 输入 如 下 信息 : 


node.startup=automatic 





如 果 将 node.starfupP 设 置 为 smaonual” ， 重 新 启动 应 用 服务 器 后 ， 需 重新 建立 基于 此 目标 


器 端口 的 Cs 连接。 

按 “ESC” 键 退出 编辑 模式 。 

输入 :wd 命令 并 按 “Enter” 键 ， 保 存 并 退出 “iscsid.conf” 文 件 。 

重启 iSCSI 服务 使 配置 生效 。 运行 OPen-iscsirestart 命 令 重 启 oPpen-iscsi 服 务 。 


# /etc/init.d/open-iscsirestart 
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Linux 平 台 open-iscsi 服 务 操作 


停止 Open-iscsi 服 务 
o # service open-iscsistop 
启动 open-iscsi 服 务 
o # service open-iscsistart 
重启 open-iscsi 服 务 
o #service open-iscsirestart 
查看 open-iscsi 状 态 


a # service open-iscsistatus 
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e open-iscsi 服 务 的 控制 
o 启动 OPpen-iscsi 服 务 
a /etc/init.d/open-iscsistart (Suse10) 
a /etc/init.d/iscsi start (Redhats) 
o 停止 Open-iscsi 服 务 
a /etc/init.d/openr-iscsistop (Suse10) 
a /etc/init.d/iscsistop (Redhat5) 
o 查看 open-iscsi 服 务 状态 
a /etC/init.d/open-iscsistatus (Suse10) 
a etc/init.d/iscsi status (Redhats) 
o 重启 ORen-iscsi 服 务 
a ™、/etc/init.d/open-iscsirestart (Suse10) 
a  /etc/init.d/iscsirestart (Redhats) 
配置 open-iscsi 服 务 开 机 时 自动 启动 
a Chkconfig open-iscsi on 


。 服务 自 启动 chkconfig --level 235 aaa on 将 服务 aaa 设 置 为 自动 启动 


口 
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Linux 发 现 使 用 存储 分 区 


。 发 现 磁盘 
o fdisk -l 
。 使 用 存储 分 区 


o 分 区 
= fdisk 


o 建文 件 系统 


a mkfs.ext3 


o R 


a mount 
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。 当 Linux 服 务 器 和 存储 设备 连接 并 登录 后 ,。 在 服务 器 查看 存储 设备 上 分 配给 服务 器 的 LUN ， 
可 以 用 fdisk - | 命令 ， 会 看 到 新 的 磁盘 分 区 , 兹 如 /dev/sdc 这 样 的 标识 。 

。 要 使 用 存储 分 区 ， 在 Linux 系 统 里 ， 还 需要 对 磁盘 分 区 并 格式 化 ， 然 后 再 挂 载 ,分 区 可 使 用 
fdisk /dev/sdx,(x 代 表 新 增 的 磁盘 符 ) 》 根据 命令 提示 操作 ， 完 成 分 区 ; 然后 再 格式 化 建 
文件 系统 ， 使 用 mkfs.ext3 /dev/sdx( 命 令 x 代 表 新 增 的 磁盘 符 ) ， 最 后 再 挂 载 分 配 好 的 磁盘 ， 
可 使 用 如 下 的 命令 格式 mountydev/sdx /mnt/sdx。 
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UltraPath for Linux 安 装 前 准备 


系统 环境 R UltraPath 


aim- cis -ai 


m= 








。 检查 UltraPath 的 兼容 性 

。 关闭 HBA 卡 自 带 的 Failover 和 Failback 功能 
。 服务 器 安装 相同 HBA 卡 

。 存储 系统 正确 配置 端口 模块 
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。 操作 步骤 : 
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口 


口 


口 


口 


步骤 1 查询 应 用 服务 器 的 Linux 操作 系统 的 版 本 及 位 数 信息 。 
步骤 2 确认 使 用 于 当前 Linux 版 本 的 UltraPath for Linux 安装 包 准 备 就 绪 。 


步骤 3 UltraPath for Linux 的 升级 需要 先 完全 逢 载 原来 的 版 本 后 重新 安装 新 的 版 本 ， 
所 以 升级 时 请 先 中 断 原 来 的 /G. 应 用 。 

步骤 4 如 果 升 级 的 服务 器 处 于 集群 环境 ， 请 将 需要 安装 UltraPath for Linux 的 服务 器 
上 的 服务 转移 到 集群 中 其 它 节点 。 


步骤 5 在 安装 UltraPath for Linux 软件 之 前 ， 请 确保 在 应 用 服务 器 的 本 地 磁盘 上 有 
10MB 的 剩余 空间 。 


多 路 径 软 件 兼容 性 查询 方式 


在 发 布 的 多 路 径 下 载 软件 包 中 ， 有 对 该 版 本 多 路 径 软件 兼容 性 的 说 明 ， 请 仔细 检查 


安装 UltraPath for Linux 


e #cd /XXX/XXX 
/xxX/XXx 表 示 多 
e #dos2unix install.sh 路 径 安装 软件 包 
的 路 径 
e #chmod +x install.sh 
#./install.sh 
#reboot ./ 表 示 执 行当 前 
目录 下 的 文件 


install.sh 
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步骤 1: 登录 应 用 服务 器 。 
步骤 2: 运行 Cd xxX/Linux 命令 进入 多 路 径 软 件 安装 包 目录 。 
XX 表示 多 路 径 软件 安装 光盘 的 根 目录 。 
步骤 3: 转换 install.sh 脚 本 的 格式 三 命令 如 下 : 
#dos2unix ./install.sh 
步骤 4: 修改 instqll.sh 脚 本 的 执行 权限 ， 命 令 如 下 : 
#chmod 744 ./install.sh 


步骤 5: 执行 安装 脚本 ， 命 令 如 下 : 


#./install.sh 
步骤 6: ERRA, SAT: 
#reboot 





0 
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Linux 设备 管理 \ 


内 存 。 ”查看 5C5| 控 制 器 信息 

cat /proc/meminfo lspci | grep SCSI 

free -m cat /proc/scsi/scsi 

查看 CPU 信息 cat /proc/scsi/qla2300/1|grep port « 
& 


cat /proc/cpuinfo 。 磁盘 
df -h 


susel:- # cat /proc/cpuinfo fdisk -l 
processor : 

vendor_id : GenuineIntel 

cpu family : 6 

model : 15 


model name : Intel(R) Xeon(R) CPU 
stepping :8 

cpu MHz : 2325.615 

cache size : 4096 KB 
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。 各 版 本 Linux 下 查看 wwn 信 息 的 方法 : 


e 5 


USE Linux 9 
查看 /proc/scsi/ala2xxx/* ， 并 以 adapter-port 为 关键 字 过 滤 即 可 查看 FC HBA 卡 的 


WWN 信 息 : 


e 5 


e R 


354 [] 


# cat /proc/scsi/ala2xxx/* | grep adapter-port 
scsi-qla0-adapter-port-21000018822c8a2c; 
scsi-qlal-adapter-port-21000018822c8a2d; 

USE Linux 10 

查看 /sys/class/fc_host/host*/port name 文件 的 内 容 即 可 看 到 对 应 FC HBA 卡 的 WWN 


# cat /sys/class/fc_host/host*/port_ name 

0x210000608b907955 

0x210000€08b902856 

edĦat Linux AS4 

查看 HBA 卡 WWN: 

# grep scsi /proc/scsi/ala2xxx/3 

Number of reqsin pending_q= 0, retry_q= 0, done_q=0, scsi retry_q= 0 


Linux 设备 管理 


内 存 。 ”查看 SC3| 控 制 器 信息 
cat /proc/meminfo lspci | grep SCSI 


free -m cat /proc/scsi/scsi 


查看 CPU 信息 cat /proc/scsi/qla2300/1|grep port K 


cat /proc/cpuinfo 。 磁盘 
df -h 


susel:- # cat /proc/cpuinfo fdisk -l 
processor : 0 
vendor_id : GenuineIntel 

cpu family : 6 

model : 15 

model name : Intel(R) Xeon(R) CPU 

stepping :8 

cpu MHz : 2325.615 

cache size : 4096 KB 
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scsi-qla0-adapter-node=200000188224d7834; 

scsi-qla0-adapter-port-21000018822d47834; 

scsi-qla0-target-0=202900a0b8423858; 

scsi-qla0-port-0=200800a0b8423858:202900a0b8423858:0000e8:1; 
e RedHat Linux ASS 


# cat /sys/class/fc_host/hostx/port_name 
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磁盘 维护 文件 管理 
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命令 功能 说 明 : 


cd 切换 目录 
df 显示 磁盘 的 相关 信息 
Is 列 出 目录 内 容 


mkdir 建立 目录 
mount 目录 挂 载 


pwd 显示 工作 目录 

rm 除 文件 或 目录 

tar 文件 归档 工具 

rpm 管理 Linux 各 项 套件 

fdisk 磁盘 分 区 

fsck 检查 文件 系统 并 尝试 修复 错误 
mnkfs 建立 各 种 文件 系统 

cat 把 档案 串 连 接 后 传 到 基本 输出 
chmod 变更 文件 或 目录 的 权限 

CP 复制 文件 或 目录 


磁盘 维护 文件 管理 


pwd 
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more 文件 分 屏 显示 
ps 报告 程序 状况 


reboot 重新 开机 
Shutdown ”系统 关机 指令 
uname 显示 系统 信息 


具体 命令 格式 及 参数 请 参考 命令 帮助 。 
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指示 灯 工 作 状态 总 结 


绿灯 亮 : 模块 正常 、 端 口 的 速率 值 

红 灯 亮 : 模块 故障 

红 灯 闪 : 模块 正在 启动 、 定 位 端口 、 定 位 硬盘 

绿灯 闪 : 端口 正在 传输 数据 、BBU 充 电 、 电 源 模块 已 接 、 硬 盘 传输 数据 电源 但 未 上 
电 、 控 制 器 正在 启动 、 端 口 模块 有 热 拔 插 请 求 


HIR: 端口 的 速率 值 

蓝 灯 闪 : 端口 正在 传输 数据 

RATE: 端口 的 速率 值 

HIA: 管理 网 口 正在 传输 数据 、BBU 正 在 放电 

灯 不 亮 : 未 上 电 、 未 连 线 、 端 口 模块 可 以 拔 揪 、 告 警 灯 灭 表示 正常 、1GB8B 的 iscsi 主 机 
端口 的 速率 灯 灭 表示 速率 低 于 1G 
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e 对 于 S2600、S5000、S5000T 端 口 速率 指示 灯 做 子 以 下 总 结 : 
蓝 灯亮 表示 4G 的 FC 主机 端口 模块 速 容 为 4G，8G 的 FC 主机 端口 模块 速率 为 8G， 


口 


10G 的 iscsi 主 机 端口 模块 速率 为 1I0oCnAminisAs 级 联 模块 与 级 联 框 连 接 速 率 为 6C 


绿灯 亮 表 示 4G 的 FC 主机 端口 粮 块 速率 为 1G 或 2G，8G 的 FC 主机 端口 模块 速率 为 4G 
或 2G，10G 的 iscsi 主 机 端 白 模 块 速率 为 1G，miniSAS 级 联 模块 与 级 联 框 连接 速率 为 


3G 


林 灯 亮 表 示 1G 的 isesi 主 机 端口 速率 为 1G 
榜 灯 灭 表示 1G 的 iscsi 主 机 端口 速率 低 于 1G 
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通过 CLI 责 面 维护 


。 访问 方式 
CU 运行 在 存储 阵列 上 ， 通 过 ssH 客 户 端 
软件 进行 访问 
同时 支持 多 个 客户 端 进行 访问 
需要 有 管理 存储 阵列 的 权限 
。 功能 
。 根据 用 户 级 别 对 命令 进行 分 类 
。 输入 命令 ， 回 车 查看 执行 笋 和 
。 支持 通过 脚本 方式 批量 处 惠 命 令 


switch 


存储 
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系统 配置 导出 


生 所 有 设备 (1) 
国 sssoor 基本 设置 
(eL:- LE 设备 时 间 管 理 
E RRR » Ucense 管 理 
全 设备 信息 
Ə mwas 
Å sangs 
CES 
E Lun 
全 运程 下 机 
© -eta 
d Rag 
ga 
Sana 
Sin 
Casa 


安全 

用 户 管理 
MUR SE 
司 访 间 PP 地 址 管理 
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Trap IP 地 址 管理 


tte 
LEE AE | 
tra 
tESSRRSR 
HELITA 
GESIENE 
AHRI 

功能 查看 


高 级 


\ MRAÆISNSEE 


Brisca 21 
软件 升级 

补丁 管理 

RSR 
HTERES 
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A EHEER EEES, PRE MRTENRTHIATMEAN 16) e HITRISM: AAA RER ISIN RRAS « 


设备 序列 吕 ” 210235G6GTZ0BB000003 设备 名 称 。 S5500T KM) 5 


Rite 
Jezz eoa 


100 mennnuesessenecensoneseseeeseneeceeeseceseses āē secsesesceren 


FA 


CL | 


iHi 
Pp CO ~— 
RHAN | MEHR 141400 141420 141500 141520 141000 141020 141700 AIT 141800 16 18-20 


V gt (IOPS) ons Spo 
an CU] uent km sing Y eg 
AFSAS Big (11 SALE (IOPS) lors 
Y 平均 VO 响应 时 间 
应 (11) pry 
pias 自 适 应 LOGE: 
A Cad a Be (1: CacnettiAs 
Came 5 HAE Bit an SAR (Ps) 
a Bjt (1:1) FORGE 


san | Cas ] 
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事件 省 理 一 一 故障 列表 À 


丰 障 列表 事件 列表 


过 寺 查 看 ”所 有 设备 ~ 所 有 事件 未 源 
oms shto 
81 事件 来 源 oD Li RENA- 
Ver 555007 0xE23E0001 LUN (LUN ID 25.) RATAHI. 2014-03-16 08:35:56 UTC +08:00 
AUS S5500T 0xE01F90008 Ki HE EFMATEETF27ECEMISASIAW. 2014-03-09 18:31:01 UTC+08:00 
Ver S5500T 0xE23E0004 EN (EME N8500_01) 上 未 安装 UltraPath_ 2014-02-25 16:23:49 UTC+08:00 
Vør sssoor DOE23E0004 EN (ENE N8500_02) LRERURaPath.. 2014-02-25 16:20:12 UTC+08:00 
Ver S5500T 0xE23E0004 ”主机 (主机 名 N8500) 上 未 安装 UltraPath 多 路 2014-02-22 17:23:11 UTC+08:00 
守重 要 0xE23E0004 ”主机 (主机 各 VTL_1) 上 未 安装 UlyaPath 儿 路 .。 2014-02-21 11:28:33 UTC+08:00 
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事件 党 理 一 一 事件 列表 


事件 管理 
Ank 事件 列表 
选择 设备 ”3S5500T S5500T 


过 下 查看 MANA 
总 数 -10249 选中 数 0 
LM | 事件 来 源 | o | Hit 发 生 时 间 > 
国信 息 555007 0x200E0.. admin-192 168.129 设 置 性 能 统计 开 - 2014-03-18 14:1238 UT 
@ e S5500T 0x200E0.. admin-192 168.1.29 设 置 性 能 续 计 第 .。 2014-03-18 14:1238 UT. 





图 信息 S5500T  O200E0. 用 户 ( 用 户 名 admin) 从 来 源 ( 192 2014-03-18 14:03:59 UT. 
V ER S5500T  OE23E0. LUN (LUNID25..) RARAS- 2014-03-16 06:35:56 UT. 
V EE S55007  OE23E0. LUN (LUNIO) 没有 宛 余 路 径 访问 2014-03-16 063443 UT. 2014-03-16 06:35:56 UT 
国信 息 S5500T  0x200E0.. 用 户 ( 用 户 名 admin) 从 来 源 ( 192. 2014-03-14 153207 UT. 
国信 息 555007 0x200€0. admin-192 168.1296( 建 虚拟 快照 (- 2014-03-14 11:34:34 UT 
@ 信息 S5500T 0x12020.. 快照 (快照 名 称 : Test_zbq snapsh… 2014-03-14 113434 UT. 
图 信息 S5500T  O1200E0. admin-192 158.129 修 改 庶 氛 快照 (.。 2014-03-14 11:33:24 UT 
@ 信息 S5500T 0x200E0.. admin-192 168.129 ERIR (.。 2014-03-14 113236 UT. 
@ 信息 555007  Ox100E0. 激活 快照 (快照 名 称 : LUN_ID_27_ 2014-03-14 11:3236 UT. 


@ 信 自 S5500T 200FN ”admin-192 168 1 2068P EH, 2014-03-14 113225 UT 
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软件 升级 


。 网 管 下 发 一 次 升级 命令 ， 系 统 自动 判断 需要 升级 的 部 件 ， 自 动 升级 所 有 需要 升级 的 
部 件 ， 升 级 过 程 中 ， 网 管 能 实时 监控 升级 进程 的 进行 ， 实 时 反馈 升级 的 结果 。 
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当前 升级 有 两 种 方式 : 在 线 升级 和 离线 升级 。 


在 线 升级 : 其 是 一 种 不 中 断 业 务 的 升级 方式 ， 有 严格 的 升级 前 检查 条 件 ， 只 有 所 有 条 件 通 
过 之 后 才能 选择 在 线 升级 。 


离线 升级 : 其 是 一 种 必须 先 停 主机 业务 的 升级 方式 ， 升 级 时 间 比 在 线 升级 要 短 。 
升级 主要 流程 : 


口 


o 0 OO 0 0 0 0 O 


解压 升级 包 

升级 管理 芯片 (SESSNBMG) 

升级 备用 电池 单元 (BBU) 

升级 接口 卡 固件 (SAS, TOE, FCoE) 
升级 逻辑 器 件 ( GPLD、FGPA ) 
升级 系统 软件 

系统 重启 

升级 BIOS 

版 本 校 验 
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366 [ 


4.2 Service Tool 
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W Huawei 





简介 


。 Ocean ToolKit 是 由 华为 技术 有 限 公 司 开发 的 工具 ， 通 过 该 工具 可 以 
帮助 技术 服务 工程 师 、 运 维 工 程 师 对 设备 进行 部 署 、 维 护 和 升级 。 


& 


à 
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部 署 功 能 


o 部署 功能 可 以 帮助 技术 服务 工程 师 运 维 工程 师 进行 设备 初始 化 。 目 前 部 署 工具 已 经 
实现 工具 独立 安装 ， 实 现 工具 独立 安装 之 后 ， 部 署 工具 可 以 通过 工具 store 进 行 安装 
， 印 载 或 升级 。 


维护 功能 
a 维护 功能 可 以 帮助 技术 服务 荆 程 师 、 运 维 工程 师 对 设备 进行 日 常 检查 、 信 息 收集 等 操 
作 。 
升级 功能 
a 升级 功能 可 以 帮助 技术 服务 工程 师 、 运 维 工程 师 对 设备 进行 升级 。 
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o 已 安装 JRE 1.6.0_20 以 上 或 JRE 1.7.0 以 下 版 本 





阵列 初始 化 部 署 、VIS 系 统 部 署 、58000 系 统 部 署 、 集 群 NAS 
部 署 、 统 一 存储 部 署 只 支持 32 位 的 Windows XP, Windéws 
操作 系统 Server 2003 和 Windows7。 
其 它 工具 支持 32 位 和 64 位 的 的 WindowsXP、WindoWws Server 
2003 和 Windows 7。 


Java 运 行 环境 JRE 1.6.0_20/X HaURE 100 A 
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FA OceanStor Toolkit 


OceanStor Toolkit 


EEE 阵列 批量 部 署 


F HURA A E SIHA 
Al MRC HR ERPE HE 


à CSS 系 统 部 署 
TE) 项 助 今 卫 轩 CSS 系 统 存 精 域 筑 节 点 信息 ， 夺 所 CSS 系统 部 署 


集群 NAS 存 储 系统 部 署 


大 助 您 耻 置 集群 NAS 引 擎 节点 和 存储 单元 93 基本 信息 ， 却 成 策 糙 NAS 存 贱 系 统 B 一 体 化 配置 
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功能 导航 栏 显示 Toolkit 的 所 有 功能 模块 。 
语言 切换 栏 切换 不 同 语言 。 

帮助 、 关 于 和 系统 设置 按钮 

子 功 能 入 口 

当前 位 置 显示 当前 所 在 的 位 置 。 


o0 3690 


DceanStor Toolkit 
~ | OceanStor Toolkit 


设备 支持 


SEE 阵列 批量 部 署 
BOTARSE 


-CSS 系 统 部 署 
SŽ), mnomRcssRemteotaRe. ARCHIEF- 


o 集群 NAS 存 储 系统 部 署 


着 助 爷 耻 贯 集 妊 NAS 引 村 节点 和 存 镶 单元 89 基 本 信息 ， 寺 成 策 妓 NAS 存 寻 不 19 一体 化 BR 置 。 
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在 部 署 项 里 ， 主 要 包括 以 下 设备 的 部 署 : 


。 阵列 批量 部 署 
。 C55 系 统 部 署 
。 集群 NAS 存 储 系统 部 署 
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后 OceanStor Toolkit 


OceanStor Toolkit 


= 日 志 分 析 
工具 支持 对 ISM 软 件 日 志 惧 集结 果 和 信息 收集 工具 收集 辕 果 进行 分 析 ， 并 提出 问 重 处 理 方案 。 


设备 档案 收集 


Liu Te) EST Sadi 24 


was 硬盘 健康 分 析 
A | ANCHTRBRMERNAREE - 


升级 评估 


慰 防 个 在 升 贷 菜 检查 T 系 列 存 阁 设备 的 唐 康 状态 


RIT 
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。 在 默认 安装 时 ， 维 护 里 面 会 安装 两 个 子 功 能 部 和 件 ” “这 检 及 续 保 检 查 ” 和 “信息 收集 ”， 
在 工具 store 选 项 里 ， 还 有 其 它 的 维护 工具 可 下 载 安 装 。 
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后 OceanStor Toolkit 


OceanStor Toolkit 


设备 升级 
©) "ACHONÈE. SAGE. ROERME. ATAN. ADERE RARNANAD. 


ER 跨 版 本 升级 


MRANEFMR BAINS E FH + 
E 


集群 NAS 升 级 
R MOCGHOMUE . DPÉMAMNE . AFAR. HEELT ARMINASHE. 


补丁 工具 


S 六 屿 您 榨 坦 设备 的 补丁 信息 ， 二 过 选 笃 正 祖 894 丁 也 并 执行 成 功 后 ， 完 记 设 备 的 安装 补丁 操作 * 
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。 在 升级 选项 里 ， 包 括 以 下 子 功能 部 件 : 
。 设备 升级 

。 跨 版 本 升级 

。 集群 NAS 升 级 

。 补丁 工具 
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O 总 结 


存储 初始 化 配置 流程 
存储 端 基础 配置 
主机 端 基础 配置 
存储 运 维 管理 
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© 思考 是 


应 用 服务 器 侧 要 安装 哪些 软件 才能 正常 使 用 存储 设备 映射 的 LUN? 
. Windows 平 台 和 linux 平 台 iSCSi 的 配置 有 什么 不 同 ? 

.… UttraPath 软件 的 主要 功能 有 哪些 ? 
.UltraPath 安 装 有 哪些 注意 事项 ? 

.存储 设备 上 创建 LUN 时 需要 考虑 文件 系统 的 哪些 参数 ? 


. linux Fiscsi initiator 软 件 的 常用 命令 ? 
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@ 练习 题 


多 选 题 
1、 多 路 径 软件 安装 的 注意 事项 有 ( ) 
A， 检 查 UltraPath 的 兼容 性 


B. 关闭 HBA 卡 自 带 的 Failover 和 Failback 功能 Ç 
C. 服务 器 安装 相同 HBA 卡 


D， 存 储 系统 正确 配置 端口 模块 

判断 题 

1、 在 windows 环 境 下 ，initiator 配 置 添加 目标 器 的 时 候 ， 目 标 器 的 I|P 地 址 配置 
为 存储 设备 的 管理 P。 (T or F) 
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Thank you 


www.huawei.com 
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HC1109107 NAS 技术 及 应 用 





NG 


HUAWEI 


0 370 


W 
4 


2., 


HC1109107 
NAS 技 术 及 应 用 
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目标 


。 学 习 完 本 课程 后 ， 您 将 能 4 
o 了 解 NAS 组 成 结构 及 实现 
o 掌握 NAS 文 件 共享 协议 NFS 以 及 CIFS 
了 解 NAS 系 统 文件 I0 与 性 能 
了 解 SAN 与 NAS 的 区 别 及 联系 
了 解 华为 NAS 产 品 
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W Huawei 


目录 ` 


. NAS 的 产生 与 发 展 

. NAS 系 统 组 成 与 部 件 

.NAS 文件 共享 协议 CIFS,NFS 
. NAS 文 件 系 统 10 与 性 能 

. SAN 与 NAS 比 较 


. 华为 实现 与 应 用 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. w HUAWEI 





0 3810 


什么 是 NAS 


e NAS (Network Attached Storage)， 网 络 附 加 存储 ， 是 一 种 将 分 布 、 
独立 的 数据 进行 整合 ， 集 中 化 管理 ， 以 便于 对 不 同 主机 和 应 用 服务 
器 进行 访问 的 技术 。 


Network Attached Storage K 
以 太 网 接口 以 太 网 接口 


文件 系统 
卷 管理 模块 卷 管理 模块 
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NAS 和 SAN 最 大 的 区 别 就 在 于 NAS 有 文件 操作 和 管理 系统 ， 而 SAN 却 没有 这 样 的 系统 功 
能 ， 其 功能 仅仅 停留 在 文件 管理 的 下 一 层 ， 即 数据 管理 。SAN 和 NAS 并 不 是 相互 冲突 的 ， 
是 可 以 共存 于 一 个 系统 网 络 中 的 ， 但 NAS 通 过 一 个 公共 的 接口 实现 空间 的 管理 和 资源 共享 ， 
SAN 仅 仅 是 为 服务 器 存储 数据 提供 一 个 专门 的 快速 后 方 存 储 通 道 。 

为 什么 FTP 文 件 服务 不 属于 NAS? 

FTP 只 能 将 文件 传输 到 本 地 的 目录 之 后 才能 执行 ， 而 网 络 文件 系统 可 以 允许 直接 问 原 端 
的 文件 ， 不 需要 将 数据 复制 到 本 地 再 访问 。 


0 382 0 


NAS 网 络 拓扑 


Windows È P” titi UNIX 客 户 端 


UNIX 服 务 器 
Windows 服 务 器 
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NAS 可 作为 网 络 节 点 ， 直 接 接 入 网 络 中 ， 理 论 二 NAS 可 支持 各 种 网 络 技术 ， 支 持 多 种 网 
络 拓扑 ， 但 是 以 太 网 是 目前 最 普遍 的 一 种 网 络 连接 方式 ， 我 们 主要 讨论 是 以 以 太 网 为 网 络 
基础 的 NAS 环 境 。 

NAS 本 身 能 够 支持 多 种 协议 (如 NFS、CIFS、FTP、HTTP 等 ) ， 而 且 能 够 支持 各 种 操作 
系统 。 通 过 任何 一 台 工 作 站 ， 采 用 IE 或 Netscape 浏 览 器 就 可 以 对 NAS 设 备 进行 直观 方便 
的 管理 。 








0 3830 


NAS 的 产生 





磁盘 和 其 它 模块 在 一 
个 服务 器 机 箱 中 ， 也 
可 置 于 服务 器 外 部 。 


db E 
ZER 





服务 器 通过 FC、IP 网 
络 连接 磁盘 阵列 。 


磁盘 阵列 走向 网 络 化 ， 


成 为 包 交 换 网 络 上 的 
Rt 
磁盘 阵列 可 同时 被 多 
个 节点 访问 。 


文件 系统 层次 之 下 的 
模块 转移 到 外 部 独立 
设备 中 。 

主机 只 负责 处 了 RE 


业务 。 


W Huawei 
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传统 的 DAS 存 储 系统 尽管 使 用 方便 ， 但 这 种 模式 是 直接 将 存储 设备 连接 到 服务 器 上 的 。 
一 方面 ， 当 存储 容量 增加 时 ， 这 种 方式 很 难 扩 展 ; 另 一 方面 ， 当 服务 器 出 现 异常 时 ， 会 使 数 
据 不 可 获得 ， 容 错 性 差 ; 再 者 ， 存 在 着 存储 数据 无 法 被 其 他 服务 器 共享 ， 扩 充 容 量 则 需要 关 
闭 整 个 系统 ， 远 程 管理 不 方便 等 诸多 缺陷 。 于 是 便 有 了 网 络 存储 技术 的 出 现 ， 网 络 存储 技 
术 分 为 两 类 ，SAN 和 NAS, 在 3AN 环 境 中 $4 存储 设备 通过 网 络 与 服务 器 相连 ， 可 以 有 更 多 的 
的 服务 器 访问 存储 设备 提供 的 存储 资源 ， 存 储 设备 提供 数据 块 级 别 的 服务 。NAS 是 一 种 向 
用 户 提供 文件 级 服务 的 专用 数据 仓储 设备 ， 直 接连 到 网 络 上 ， 不 再 挂 接 服务 器 后 端 ， 避 免 
给 服务 器 增加 I/O 〇 负载 ,服务 器 只 负责 处 理 自身 业务 。 


集群 NAS 存 储 系统 概念 与 特点 ` 


。 集群 技术 

o 定义 : 

。 集群 是 由 一 组 相互 独立 的 服务 器 组 成 ， 对 外 表现 为 单一 服务 器 ， 提 供 高 可 靠 
性 服务 。 

o 特点 : 
， 统一 命名 
， 高 可 靠 性 
。 性 能 扩展 


。 共享 数据 空间 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. w HUAWEI 





。 集群 技术 概念 : 


一 组 相互 独立 的 服务 器 在 网 络 中 表现 为 单一 的 系统 ， 并 以 单一 系统 的 模式 加 以 管理 。 
此 单一 系统 为 客户 工作 站 提供 高 可 靠 性 的 服务 。 


。 集群 技术 特点 : 


o 统一 命名 : 大 多 数 模式 下 ， 和 集群 中 所 有 的 计算 机 拥有 一 个 共同 的 名 称 ， 集 群 内 任 
一 系统 上 运行 的 服务 可 被 所 有 的 网 络 客户 所 使 用 。 


o 高 可 靠 性 : 集群 必须 可 以 协调 管理 各 分 离 的 组 件 的 错误 和 失败 ， 集 群 内 单一 系统 
的 失败 由 其 他 集群 成 员 来 弥补 ， 对 客户 是 不 可 见 的 。 集 群 内 部 各 节点 服务 器 通过 
一 内 部 局 域 网 相互 通讯 。 当 一 台 节 点 服务 器 发 生 故 障 时 ， 这 合 服务 器 上 所 运行 的 
应 用 程序 将 在 另 一 节点 服务 器 上 被 自动 接管 。 当 一 个 应 用 服务 发 生 故 障 时 ， 应 用 
服务 将 被 重新 启动 或 被 另 一 台 服 务 器 接管 。 当 以 上 的 任 一 故障 发 生 时 ， 客 户 都 将 
能 很 快 连接 到 新 的 应 用 服务 上 。 


o 性 能 扩展 : 并 可 透明 地 向 集群 中 加 入 组 件 ， 提 升 系统 性 能 。 


4 共享 数据 空间 : 一 个 集群 包含 多 人 台 { 至 少 二 台 } 拥 有 共享 数据 存储 空间 的 服务 器 。 
在 何 一 全 服务 器 运行 一 个 应 用 时 ， 应 用 数据 被 存储 在 共享 的 数据 空间 内 。 每 全 服 
务 器 的 操作 系统 和 应 用 程序 文件 存储 在 其 各 自 的 本 地 储存 空间 上 。 
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集群 NAS 


o 集群 NAS 优 点 


故障 切换 快速 ; 


双 控 模式 采用 
Acfive- 
Acfive 模 式 ， 
集群 单个 节点 


引擎 架构 可 
扩展 ; 共享 
存储 设备 ; 
文件 系统 位 
于 存储 侧 ， 


读 取 速度 快 。 


多 层面 提供 
扩展 优势 : 
NAS 机 头 ， 
存储 容量 ; 
-a 
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集群 NAS 相 较 于 传统 NAS， 由 于 引擎 采用 了 集群 架构 ， 带 来 了 多 方面 的 优势 ， 引 擎 集群 
之 间 采 用 双 活 模式 ， 可 靠 性 更 高 。 集 群 染 构 吻 和 扩展， 增加 引擎 能 线性 提高 性 能 ; 易 扩展 ， 
新 的 引擎 可 直接 加 入 集群 ， 在 线 扩容 ,A 对 业务 不 造成 影响 。 易 管理 ， 对 集群 内 的 引擎 节点 
可 统一 管理 。 


NAS 与 文件 服务 器 对 比 KR” 


文件 服务 器 | 
稳定 性 、 可 靠 性 高 


服务 多 样 化 、 功 能 强大 数据 安全 性 高 
易 用 、 操 作 简单 存储 空间 大 
具有 容 灾 、 备 份 设计 


无 容 灾 设计 


提供 的 服务 种 类 相 比 交 件 服 
数据 安全 性 差 务 器 有 不 足 





+ 
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文件 服务 器 主要 任务 是 为 网 络 上 的 计算 机 提供 多 样 化 的 服务 ， 如 在 文件 共享 及 处 理 、 网 
页 发 布 、FTP、 电 子 邮件 服务 等 方面 有 明显 的 优势 ， 这 主要 得 益 于 文件 服 备 器 通常 是 采取 
高 性 能 的 CPU， 与 NAS 相 比 它 在 数据 备份 、 激 据 安 全 等 方面 并 不 占 优势。 

通过 对 比 不 难看 出 ， 文 件 服务 器 相对 也 NAS 综 合 功能 特别 是 在 文件 处 理 能 力 方面 更 为 强 
大 ， 但 文件 服务 器 在 数据 的 备份 和 恢复 即 远 没有 NAS 的 功能 完善 ， 系 统 稳定 性 亦 没 NAS 的 
好 ， 存 储 容量 空间 没有 NAS 大 易 久 展 ” 同时 在 数据 安全 如 数据 容 灾 方面 NAS 更 具 优势 。 在 
这 种 状况 下 ， 两 者 无 法 相互 替代 。 
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NAS 系 统 架 构 


NFS 


网 络 文件 共享 
(NFS,CIFS) 


文件 系统 


操作 系统 


NAS 引 擎 


E © := 6 > 


(磁盘 监视 ， 异 常 处 理 ，RAID) 
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NA 系统 软件 设计 的 基本 要 求 是 较 高 的 稳定 性 和 MO 吞吐 率 ， 并 能 满足 数据 共享 、 数 
据 备份 、 安 全 配置 、 设 备 管理 等 要 求 。 该 结构 分 为 五 个 模块 : 操作 系统 、 存 储 管理 器 、 文 
件 系统 、 网 络 文件 共享 和 GUI 管 理 模 块 % 


鉴于 LinUx、FreeBSD 等 免费 的 开放 源码 操作 系统 具有 稳定 、 可 靠 、 高 效 的 优秀 特性 ， 
现在 大 部 分 NAS 设 备 都 是 基于 此 类 操作 系统 开发 的 。 


存储 管理 器 的 主要 功能 是 磁盘 和 分 区 的 管理 ， 主 要 包括 磁盘 的 监测 与 异常 处 理 和 逻辑 
卷 的 配置 管理 ， 一 般 应 支持 磁盘 的 热 插 找 、 热 替换 等 功能 和 RAIDO、RAID1、RAID5 类 型 
的 逻辑 卷 。 存 储 管理 器 实现 简化 的 、 集 中 的 存储 管理 功能 ， 保 证 数据 的 完整 性 ， 并 增强 数 
据 的 可 用 性 。 

文件 系统 提供 持久 性 存储 和 管理 数据 的 手段 ， 它 必须 是 32 位 或 以 上 并 能 支持 多 用 户 ， 
应 具备 日 志文 件 系 统 功 能 以 使 系统 在 崩 江 或 掉 电 重启 后 能 迅速 恢复 文件 系统 的 一 般 性 和 完 
整 性 ， 进 一 步 提 供 NAS 的 可 用 性 。 此 外 ， 文 件 系 统 还 应 具有 快照 功能 。 快 照 不 仅 能 恢复 被 
用 户 错误 修改 或 删除 的 文件 ， 而 且 能 实现 备份 窗口 为 零 的 文件 系统 活 备份 。 

网 络 文件 共享 一 般 支 持 以 下 一 些 文件 传输 和 共享 协议 ， 如 FIP 和 HTTP 协 议 、Unix 系 统 
的 NFSNSWindows 系 统 的 CIFS、Novell 系 统 的 NCP (Novell core protocol) 、Apple 系 
统 的 AFP (appletak file protocol) 等 ， 因 此 NAS 设 备 具有 较 好 的 协议 独立 性 。 


GUI 管 理 提供 给 系统 管理 员 一 个 友好 的 界面 ， 使 之 仅 通过 Web 浏览 器 操作 就 能 远程 监 
视 和 管理 NAS 设 备 的 系统 参数 ， 如 : 网 络 配 置 、 用 户 与 组 管理 、 卷 以 及 文件 共享 权限 等 。 
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NAS 的 组 件 


提供 文件 系统 





RAID 
SCSI 
SAS 
FC 
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。 存储 部 分 功能 模块 提供 了 真正 的 物理 存储 空间 主要 技术 是 RAID、SCSl、SAS、FC 等 


技术 。 


。 控制 器 部 分 指 NAS 引 擎 部 分 ， 这 部 分 提供 了 了 NAs 底 层 所 使 用 的 文件 系统 ， 以 及 承载 文件 


系统 、 各 种 前 端 协议 的 操作 系统 。 


。 网 络 部 分 提供 了 和 用 户 交 互 的 网 络 协议 ， 主 要 包括 NF3 和 CIFS3 ， 用 户 最 终 通过 这 些 协 议 


访问 存储 空间 。 


NAS 引 擎 S 


+ 
提供 文件 共享 接口 上 


提供 NAS 软 件 运 
行 的 硬件 平台 


PASEAK 


% 
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NASSIÉÆENASÉR ER RIT AEEA, 通过 软件 的 处 理 ， 将 后 端 存 储 提供 的 卷 以 
NAS 方 式 提供 给 客户 使 用 ， 需 要 较 好 的 I/ 全 处 理 能 力 、 网 络 带 宽 和 可 靠 性 


0 3910 


网 络 模块 








CIFS 或 NFS 协 议 CIFS 或 NFS 协 议 


CIFS 或 NFS 协 议 
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NAS 设 备 中 所 包含 的 标准 文件 系统 可 以 对 公用 互联 网 文件 系统 (CIFS) 或 是 网 络 文件 
RA (NFS) 提供 支持 ， 也 有 可 能 同时 支持 三 者 。 在 许多 情况 下 ， 它 都 使 用 标准 的 网 络 文 
件 系统 来 作为 NAS 专 用 文件 系统 的 接口 。 大 多 数 NAS 设 备 需要 用 这 种 方式 来 管理 其 自身 的 
存储 资源 。 


NFS (网 络 文件 系统 ) 是 Unix 系 统 间 实现 磁盘 文件 共享 的 一 种 方法 ， 支 持 应 用 程序 在 客 
户 端 通过 网 络 存 取 位 于 服务 器 磁盘 申 数据 的 一 种 文件 系统 协议 。 其 实 它 包括 许多 种 协议 ， 
最 简单 的 网 络 文件 系统 是 网 络 逻 辑 磁盘 ， 即 客户 端的 文件 系统 通过 网 络 操 作 位 于 远 端的 逻 
辑 磁 盘 。 现 一 般 在 Unix 主 机 产 间 采 用 Sun 开 发 的 NFS (Sun) ， 它 能 够 在 所 有 Unix 系 统 之 间 
实现 文件 数据 的 互 访 ， 逐 渐 成 为 主机 间 共 享 资源 的 一 个 标准 。 

CIFS 是 由 微软 开发 的 ， 用 于 连接 Windows 客 户 机 和 服务 器 。 经 过 Unix 服 务 器 厂商 的 重 
新 开发 后 ， 它 可 以 用 于 连接 Windows 客 户 机 和 Unix 服 务 器 ， 执 行文 件 共享 和 打印 等 任务 。 
它 最 早 的 由 来 是 NetBIOS， 这 是 微软 开发 的 在 局 域 网 内 实现 基于 Windows 名 称 资源 共享 的 
APl。 之 后 ,产生 了 基于 NetBIOS 的 NetBEUI 协 议和 NBT(NetBIOS OVER TCP/IP) 协 议 。 
NBT 协 议 进 一 步 发 展 为 SMB (Server Message Block Potocol) 和 CIFS (Common 
Internet. File System， 通 用 互联 网 文件 系统 ) 协议 。 其 中 ，CIFS 用 于 Windows 系 统 ， 而 
SMB 访 泛 用 于 Unix 和 Linux， 两 者 可 以 互通 。SMB 协 议 还 被 称 作 LanManager 协 议 。CIFS 
支持 与 SMB 的 服务 器 通信 而 实现 共享 。 微 软 操作 系统 家 族 和 几乎 所 有 Unix 服 务 器 都 支持 
SMB 协 议 /SAMBA 软 件 包 。 


0 3920 


存储 | 


。 存储 为 NAS 系 统 提供 了 真正 的 物理 存储 空间 ， 数 据 通过 NAsS 引 擎 处 理 以 后 ， 
将 数据 保存 到 存储 设备 中 。 


K 
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什么 是 CIFS? 


CIFS (Common Internet File System)， 通 用 Internet 文 件 系 统 ， 一 个 新 提出 的 
协议 ， 它 使 程序 可 以 访问 远程 Internet 计 算 机 上 的 文件 并 要 求 此 计算 机 的 服 


务 。 
架构 X 
o 客户 /服务 器 模式 

应 用 

o Windows 系 统 共 享 文 件 的 环境 

传输 协议 

o TCP/IP 
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CIFs 使 用 客户 /服务 器 模式 ， 客 户 程序 请 求 远 在 服务 器 上 的 服务 器 程序 为 它 提 供 服务 ， 
服务 器 获得 请 求 并 返回 响应 ， 用 在 Windows 系 统 共 享 文件 的 环境 。 当 NAS 系 统 对 
Windows 系 统 服务 器 提供 存储 资源 共享 时 ,采用 CIFS 文 件 系 统 。 


0 


395 [ 


什么 是 NFS? 


e NFS (Network File System ) -网 络 文件 系统 
o NFS (网 络 文件 系统 ) 是 Unix 系 统 间 实现 磁盘 文件 共享 的 一 种 方法 ， 支 
持 应 用 程序 在 客户 端 通过 网 络 存 取 位 于 服务 器 磁盘 中 数据 的 一 种 文件 系 
统 协议 。 
。 架构 
o 客户 端 /服务 器 架构 
。 应 用 
o 主要 应 用 在 UNIX 环 境 
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NFS (Network File System， 网 络 文件 系统 ) 是 当前 主流 异 构 平 台 共 享 文件 系统 之 一 。 主 
要 应 用 在 UNIX 环 境 下 。 最 早 是 由 SUN microsystem 开 发 ， 现 在 能 够 支持 在 不 同类 型 的 系 
统 之 间 通 过 网 络 进行 文件 共享 ， 广 泛 应 用 在 FreeBSD、SCO、Solqaris 等 等 异 构 操 作 系 统 平 
A, 人 允许 一 个 系统 在 网 络 上 与 它 人 共享 目录 和 文件 。 通 过 使 用 NFS， 用 户 和 程序 可 以 象 访 
问 本 地 文件 一 样 访问 远 端 系统 上 的 文件 $ 使 得 每 个 计算 机 的 节点 能 够 像 使 用 本 地 资源 一 样 
方便 地 使 用 网 上 资源 。 换 言 之 、NFSS 可 用 于 不 同类 型 计算 机 、 操 作 系统 、 网 络 架 构 和 传输 
协议 运行 环境 中 的 网 络 文件 远程 访问 和 共享 。 


NFS 的 工作 原理 是 使 用 客户 端 /服务 器 染 构 ， 由 一 个 客户 端 程序 和 服务 器 程序 组 成 。 服 
务 器 程序 向 其 它 计算 机 提供 对 文件 系统 的 访问 ， 其 过 程 就 叫做 “输出 ”。NFS 客户 端 程序 
对 共享 文件 系统 进行 访问 时 ， 把 它们 从 NFS 服务 器 中 “输送 ”出 来 。 文 件 通 常 以 “ 块 ” 
为 单位 进行 传输 .其 尺寸 是 8K (虽然 它 可 能 会 将 操作 分 成 更 小 尺寸 的 分 片 ).NFS 传输 协议 用 
于 服务 器 和 客户 机 之 间 文 件 访问 和 共享 的 通信 ， 从 而 使 客户 机 远程 地 访问 保存 在 存储 设备 
上 的 数据 。 


CIFS 和 NFS 对 比 


。 如 果 文 件 系统 已 经 设置 为 CIFS 共 享 ， 则 此 文件 系统 只 能 设置 为 只 读 
的 NFS 共 享 。 


。 如 果 文 件 系 统 已 经 设置 为 NFS 共 享 ， 则 此 文件 系统 只 能 设置 为 内 
的 CIFS 共 享 。 


Windows 


小 ， JA 
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、CIFS 面 向 网 络 连接 的 共享 协议 ， 对 网 络 传输 的 可 靠 性 要 求 高 ， 常 使 用 TCP/IP; NFS 
ns 可 使 用 TCP 或 UDP ; 


2、NFS 缺 点 之 一 ， 是 要 求 client 必 须 安装 专用 软件 ; 而 CIFS 集 成 在 OS 内 部 ， 无 需 额外 
添加 软件 ; 


3 、NFS 属 无 状态 协议 ， 而 CIFS 属 有 状态 协议 ; NFS 受 故障 影响 小 ， 可 以 自 恢复 交互 过 
程 ，CIFS 不 行 ; 从 传输 效率 上 看 兴 CIFS 优 于 NFS， 没 有 太 多 克 余 信息 传送 ; 


4 、 两 种 协议 都 需要 大 件 格式 转换 ，NFS 保 留 了 unix 的 文件 格式 特性 ， 如 所 有 人 、 组 等 
等 ; CIFS 则 完全 安装 win 的 风格 来 作 。 


0 
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在 NAS 系 统 中 ，NAs 引 擎 通过 网 络 将 后 端的 存储 资源 以 文件 夹 的 形式 对 外 提供 ， 当 客户 
端 在 访问 使 用 NA 存储 资源 的 时 候 ， 一 般 由 应 用 发 起 MO 操作 ， 然 后 通过 网 络 到 达 NAsS 引 
擎 ， 引 擎 再 对 MO 操作 进行 处 理 ， 最 后 命令 到 过 存储 阵列 ， 完 成 JD 操 作 。 


NAS 性 能 影响 主机 侧 


。 处 理 器 性 能 低 
。 负荷 过 载 


处 理 器 性 能 


一 
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访问 主机 客户 端 本身 配 置 较 低 ， 操 作 系统 要 花 较 多 的 时 间 来 处 理应 用 ， 如 果 再 加 上 主机 
上 运行 的 业务 程序 过 多 ， 那 么 需要 更 多 的 时 间 去 处 理 接收 到 的 响应 ， 那 么 就 会 影响 到 主机 


端 应 用 对 存储 的 操作 。 


NAS 性 能 影响 网 络 \ 


目录 服务 认证 


路 由 交换 机 性 能 
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。 跳 转 次 数 
大 量 的 网 络 包 跳 转 会 增加 延迟 ; 
。 重 传 


链 路 错误 、 缓 冲 区 溢出 和 流量 控制 机 制 都 会 导致 重 传 。 这 会 导致 未 到 达 指 定 目的 地 的 报 
文 被 重新 发 送 。 在 配置 网 络 设备 的 速率 参数 、 双 工 通信 参数 以 及 NAS 头 参数 时 要 注意 使 它 
们 彼此 匹配 。 不 恰当 的 配置 会 导致 错误 和 重 传 ， 增 加 延迟 。 


。 目录 服务 的 认证 


例如 LDAP、 活 动 目录 或 NIS: 认证 服务 是 网 络 上 必须 的 服务 ， 而 且 必须 拥有 充足 的 带宽 
和 足够 的 资源 来 支持 认证 过 程 产生 的 负载 。 否 则 ， 大 量 的 认证 请 求 发 向 服务 器 会 增加 延迟 
。 当 然 ， 只 有 当 认 证 发 生 时 才 会 增加 延迟 。 


。 路 由 交换 机 性 能 
在 网 络 中 站 一 个 过 载 的 设备 所 需要 的 响应 时 间 总 是 比 优化 状态 下 使 用 的 或 低 负载 使 用 的 
设备 所 需要 的 响应 时 间 要 长 。 
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NAS 性 能 影响 NAS 设 备 侧 
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。 文件 目录 查找 
文件 目录 过 大 过 深 ， 在 查找 的 时 候 会 非常 耗资 源 ， 对 NAS 性 能 造成 一 定 影响 ; 
。 设备 过 载 
设备 过 载 ， 会 长 时 间 处 于 高 负荷 的 状态 ， 对 应 用 的 响应 造成 影响 ; 
。 存储 阵列 降级 


阵列 降级 状态 ， 阵 列 内 的 磁盘 参与 重 构 ， 一 般 重 构 数 据 量 都 比较 大 ， 直 接 影响 阵列 的 性 
能 ， 进 而 影响 NAS 的 性 能 ; 


。 存储 阵列 设备 性 能 低下 


存储 阵列 设备 性 能 低下 会 直接 影响 NAS 的 性 能 ， 因 为 NAS 对 数据 的 IO 操 作 最 终 的 处 理 设 
备 还 是 在 阵列 上 进行 的 ， 如 果 阵列 性 能 低下 了 ， 整 个 NAS 性 能 性 能 也 就 低下 了 。 
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© 目录 | 
. NAS 的 产生 与 发 展 

. NAS 系 统 组 成 与 部 件 

.NAS 文件 共享 协议 CIFS,NFS 





. NASs 文 件 系统 IO 与 性 能 
. SAN 与 NAS 比 较 


. 华为 实现 与 应 用 
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10 类 型 


。CPU 密 集 
o 应 用 程序 内 部 罗 辑 复杂 ， 占 CPU 资源 多 ， 对 磁盘 的 实际 10 操 作 较 
De 


+ ORË K 


o 应 用 程序 内 部 逻辑 简单 ， 占 CPU 资 源 不 多 ， 但 存储 数据 量 比 较 大 
并 且 较 频繁 。 
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要 对 3AN 和 NAS 进 行 性 能 比较 ， 首 先 要 分 场景 光 它们 有 各 自 所 擅长 的 场景 ， 不 同 的 场景 
所 对 应 的 就 是 IO 的 类 型 ， 从 大 的 方面 分 , 6J 把 | 〇 类 型 分 为 CPU 密 集 型 和 |O 〇 密集 型 ， 当 然 ， 
还 有 其 它 的 一 些 ID 特征 ， 比 如 IO 〇 的 数据 大 小 ， 是 随机 的 还 是 连续 的 ， 读 写 所 占 的 比例 等 ， 
这 些 都 会 对 ID 的 性 能 造成 一 定 的 影响 。 


SAN 与 NAS 比 较 


FC,SCSI, 
iSCSI 


CIFS,NFS，| 自 有 文件 系 
HTTP, | 统 能 直接 提 
FTP 供 共享 
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SAN 存 储 提供 数据 块 级 别 的 访问 ， 需 要 客户 端 对 使 用 的 存储 资源 进行 格式 化 ， 然 后 才能 
使 用 ， 由 于 SAN 网 络 一 般 采 用 FC 网 络 架 构 ， 是 专用 网 络 ， 速 度 较 快 ， 适 用 于 IO 操作 较 密集 
的 环境 ; 


NAS 提 供 的 是 文件 级 别 的 共享 ， 用 户 能 像 使 用 网 上 邻居 共享 的 文件 夹 一 样 使 用 ， 使 用 比 


较 方便 。 而 且 通过 TCP/IP 网 络 共享 ， 在 理论 上 共享 的 距离 不 受 限制 ， 适 用 小 块 CPU 密 集 环 
境 。 
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. NAs 的 产生 与 发 展 

. NAS 系 统 组 成 与 部 件 

. NAS 文 件 共享 协议 CIFS,NFS 
. NAS 文 件 系 统 10 与 性 能 
.SAN 与 NAS 比较 

. 华为 实现 与 应 用 
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N8500 产 品 特点 \ 


High Performance 

e N8500 SPECsfs 基 准 认证 结果 业界 领先 
。 性 能 线性 扩展 ， 按 需 购买 
Scalability 


。 领先 的 多 节点 全 Active 集 群 架构 


。 系统 最 大 支持 15PB 存 储 容量 
Efficiency 


。 细 粒 度 的 动 储 功 能 


Convergence 
e NFS, CIFS, iSCSI, FCP, FCoE, RTP, HP. NDMP 等 协议 支持 
。 SAN 和 NAS 统 一 管理 
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N8500 是 一 款 集群 化 的 中 高 端 NAS 存 储 系统 3 针对 高 效 数 据 共享 产品 的 需求 ， 具 有 灵 
活 的 横向 及 纵向 可 扩展 性 ; 可 用 于 金融 政府 石油 天 然 气 、 健 康 和 生命 科学 、 制 造 业 、 
E-Discovery 等 行业 。 

N8500 的 特点 主要 体现 在 高 可 靠 性 、 高 性 能 、 支 持 动 态 分 级 存储 、 支 持 业 务 网 口 绑 定 、 
支持 用 户 配额 管理 、 支 持 文件 系统 快照 、 支 持 基 于 LAN 的 备份 、 支 持 文件 系统 多 重 镜像 、 
支持 文件 系统 在 线 扩容 、 支 持 NFS 和 CIFS 协 议 的 共享 、 支 持 FTP 协 议 访问 、 支 持 域 环境 、 支 
持 存 储 单元 后 台 格 式 化 。 
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N8500 架 构 优 势 


传统 NAS 架 构 N8500 集 群 NAS 架 构 
。 非 集群 架构 ，NAS 引 擎 各 自 管理 被 分 配 的 空间 ; 。 全 Acfive 集 群 架 构 ，NAS 引 擎 管理 整个 存储 空间 ; 
。 同一 业务 由 特定 引擎 提供 服务 ， 性 能 有 限 。 同 一 业务 由 多 引擎 并 发 提供 服务 ， 性 能 、 扩 展 性 强 





我 们 先 看 一 下 传统 NAS 的 架构 ， 传 统 NAS 非 集群 架构， 多 为 Active-Standby 染 构 ， 
NAs 引 擎 各 自 管 理 被 分 配 的 空间 ， 如 左 图 ， 闫 件 系统 A 仅 属于 A 控 管 ， 文 件 系统 B 仅 属于 B 
控 管 ，AB 控 相互 独立 。 前 端 服务 器 需要 访问 文件 系统 A， 只 能 从 A 控 获取 ， 可 以 想象 ， 随 
着 服务 器 增多 ，A 控 制 器 的 压力 逐渐 增 大 形成 瓶 诺 。 当 人 控制 器 故障 的 时 候 ， 控 制 器 B 才 
会 接管 文件 系统 A。 


N8500 采 用 集群 架构 ， 所 有 引擎 均 处 于 活动 状态 ，NAS 引 擎 管理 后 端 整个 存储 空间 ， 文 
件 系统 A 的 数据 ， 服 务 器 群 既 可 以 通过 A 控 访问 ， 也 能 通过 B 控 访问 ， 文 件 系统 B 也 是 如 此 
。 通 过 多 个 控制 器 访问 同 = 文件 系统 ， 提 升 并 发 处 理 效 率 ， 相 当 于 N 个 人 同时 干 一 个 活 ， 
在 HPC ， 媒 资 等 高 性 能 存储 市 场 效率 可 成 倍 提升 。 同 时 支持 故障 自动 切换 ， 保 障 业 务 持续 


运行 。 


e 支持 SSD、SAS、NL-SAS、 
SATA; 

。 以 资源 池 方 式 对 存储 
进行 管理 ; 

。 针对 应 用 类 型 ，: 


NL-SAS SATA 





对 于 存储 空间 的 管理 ， WwW de \ 同 类 型 磁盘 介质 进行 统一 管理 ， 可 支 
持 SSD、SAS、NL-SAS、SATA 多 种 磁盘 类 型 , 5 针对 不 同类 型 的 应 用 ， 划 分 不 同 级别 的 资 
源 空间 ， 这 样 做 可 以 实现 按 需 分 配 ， at ， 达 到 资源 的 最 优 配置 。 


Tier0-SSD Tierl-SAS 
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智能 迁移 ， 提 升 性 能 并 降低 采购 成 本 。 太 家 都 知道 ， 数 据 可 以 根据 其 被 使 用 的 频 度 分 为 
热点 数据 和 非 热点 数据 ，N8500 通 过 3mertCeche 技 术 和 D3T 技 术 实现 对 热点 数据 的 加 速 
， 对 非 热 点 数据 的 智能 迁移 。 

DT 预测 功 能 是 通过 对 用 户 当前 业务 负载 特点 的 分 析 ， 将 负载 高 的 数据 预测 分 配 到 高 性 
能 层 或 者 性 能 层 ， 将 负载 非常 低 或 者 完全 为 0 的 数据 预测 分 配 到 容量 层 ， 在 满足 用 户 当前 
业务 性 能 需求 且 保 证 总 价格 最 低 的 情况 下 ， 给 出 用 户 存储 池 中 的 所 有 业务 数据 在 各 层 分 布 
最 合理 的 预测 比例 ， 以 指导 用 户 后 续 进行 合理 的 配置 。 


smartCoche 技 术 通 过 对 热点 数据 进行 智能 迁移 ， 将 热点 数据 镜像 至 yyD 缓 存 池 中 ， 缓 
存 池 中 始终 保留 最 热点 的 数据 ， 提 升 热 点 数据 的 访问 性 能 ， 通 常 可 提升 5 倍 或 以 上 。 广 泛 
适用 于 互联 网 ， 运 营 商 彩铃 彩信 等 应 用 场景 。 

而 对 于 非 热 点 数据 的 智能 迁移 ，N8500 通 过 DST 技 术 来 实现 ， 通 常 热点 数据 和 非 热 点 数 
据 大 约 是 2:8、 将 大 量 的 非 热 点 数据 根据 策略 自动 迁移 至 廉价 的 大 容量 SATA 盘 上 ， 降 低 采 
购 成 本 ， 通 常 可 降低 60% 的 硬盘 采购 成 本 。 相 比 业界 的 分 级 存储 ，DST 技 术 的 迁移 对 象 是 
针对 文件 进行 迁移 ， 热 点 识别 更 精准 ， 迁 移 粒 度 更 灵活 。 广 泛 适用 于 音 视频 点 播 ， 邮 件 系 
统 ， 媒 资 库 等 存在 大 量 “ 冷 ”数据 的 应 用 场景 


0 40f 


本 地 数据 保护 ` 


有 效 防止 误 删 除 ， 实时 镜像 ， 业 务 
提升 数据 安全 性 镜像 TERNO 
快照 Mirror 

Snapshot 


时 集成 NBU 
EARR BAED ne 
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前 面 我 们 解决 了 存储 的 性 能 ， 扩 展 性 ,空间 利用 率 ， 那 么 如 果 保 证 数据 的 安全 了 呢 ， 
N8500 通 过 多 种 技术 保证 数据 安全 。 


快照 技术 能 有 效 解决 数据 的 误 删除 ,提升 数据 安全 性 。 


镜像 技术 ，N8500 后 端 连接 多 套 存 储 单元 ， 数 据 同步 镜像 写 入 存储 单元 ， 一 个 存储 单元 
故障 时 不 影响 业务 运行 ， 提 升 业务 可 靠 性 。 


集成 NBU 的 备份 客户 端 , 实现 数据 高 效 备份 ,NBU 是 赛 门 特 克 公司 备份 软件 Netbackup 
的 简称 。 
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异地 数据 容 灾 
基于 改变 量 的 复制 数据 块 和 文件 两 个 层级 


网 络 资源 占用 少 复制 任务 窗口 短 


Replication 


HyperMirror A/S 


生产 站 点 
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有 了 本 地 的 数据 安全 保护 还 不 够 ， 对 于 关键 数据 ， 有 时 我 们 还 需要 在 异地 保留 一 份 数据 。 
N8000 支 持 基 于 SAN 空 间 和 NAS 空 间 的 两 个 层级 数据 复制 ， 进 一 步 提 升 数据 的 安全 性 。 远 
程 复 制 是 基于 改变 量 的 复制 ， 占 用 网 络 资源 少 ， 缩 短 复制 任务 窗口 。 生 产 站 点 数据 一 旦 发 
生 丢 失 ， 可 通过 灾 备 站 点 对 数据 进行 恢复 
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多 协议 融合 PNI 


数据 块 访 问 协议 
FCP, FCoE, iSCSI 文件 访问 协议 


NFS, CIFS, FTP, HTTP ”5 和合 


其 它 协议 


NDMP, SNMP, Syslog, 
NTP 





% 
Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved ~、 Page 35 w HUAWEI 


多 协议 融合 ，N8500 支 持 FCP，FCoE， SCSI, 相 比 在 文件 系统 层面 上 再 虚拟 SAN 
空间 的 方式 ， 有 更 高 的 效率 ; 支持 基于 文件 的 NFS5，ClFS，FTP，HTTP 访 问 协 议 ， 同 时 支持 
NDMP，SNMP，Syslog 等 其 他 协议 。 通 过 将 不 同 协议 融合 至 一 套 存储 系统 中 ， 满 足 不 同 
应 用 类 型 对 存储 的 要 求 ， 简 化 [基础 架构 入 减少 设备 数量 和 采购 成 本 。 

NDMP 是 由 Network Appliancé Cetporation 和 Legato System 公司 合作 开发 的 一 种 
基于 NAS 的 容 灾 备份 技术 。 它 提供 了 一 个 开放 的 协议 ， 利用 NAS 设 备 进行 数据 的 备份 /恢复 ， 
符合 NDMP 的 备份 应 用 程序 到 以 通过 它 来 控制 任何 运行 NDMP 服 务 器 应 用 程序 的 NDMP 主 
机 的 备份 与 恢复 。 NS 


0 430 


云 备 份 场景 - 云 备份 服务 商 数据 中 心 


企业 用 户 个 人 用 户 


@g 0 0 © © 
DI Qi D fan Of 


0 © © ee o 
cf Te cf oo of 


`, -一 
> ` 
% 


Challenge 


海量 文件 的 高 并 发 处 理 ; 
弹性 易 扩 展 ， 易 管理 
7*24 高 可 靠 运行 ; 


Why Huawei 


兴 全 Active 集 群 架构 ， 性 能 No.1， 支 撑 更 多 并 发 用 户 ; 
光 性 能 ` 令 容量 两 个 维度 灵活 扩展 ; 
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云 备份 应 用 场景 主要 关注 性 能 ， 扩 展 性 和 对 海量 文件 的 处 理 能 力 ， 华 为 N8500 采 用 全 
Acfive 集 群 架构 ， 适 合 海量 用 户 并 发 访问 存储 % 同时 随 着 用 户 数量 增 大 ， 数 据 容量 不 断 增 
大 ，N8500 也 能 轻松 扩容 应 对 ， 能 有 效 保护 原 有 投资 。 
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存储 整合 场景 一 一 数字 图 书馆 /档案 乌 


OA/Email 教学 视频 电子 文档 





提供 FCIP-SAN ,RS 融 各 架构 ， 简 化 IT 基础 设施 ; 
统一 管理 界面 ,人 向 导 式 配置 ， 简 化 运 维 管理 ; 
丰富 的 软件 特性 ， 芍 于 块 和 基于 文件 


W Huawei 





存储 整合 应 用 场景 主要 关注 存储 能 提供 直 富 的 接口 和 协议 ， 提 供 丰 富 的 软件 特性 ， 满 足 
不 同 应 用 程序 ， 不 同 服务 等 级 对 存储 的 不 同 需求 ， 在 数据 中 心 放置 一 套 存 储 就 能 满足 各 种 
需求 。 华 为 N8500 提 供 多 种 接口 模式 , 移 种 协议 类 型 对 外 提供 存储 资源 ， 能 很 好 的 满足 存 
储 整合 应 用 场景 的 需求 。 
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加 总结 

。 NAS 组 成 结构 及 实现 

。 NAS 文 件 共享 协议 NFS 以 及 CIFS 
NAS 系 统 文件 I0 与 性 能 
SAN 与 NAS 的 区 别 及 联系 
华为 NAS 产 品 
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W Huawei 


图 思 考题 


. 什么 是 NAS 

.NAS 的 硬件 组 成 及 软件 架构 
.NFS,CIFS 的 应 用 

. SAN 与 NAS 的 比较 
.华为 的 NAS 产 品 
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。 多 选 题 

1、NAS 的 组 件 由 哪 几 部 分 构成 ? ( 
A、 存 储 
B、 网 络 
C、 引 擎 
D、 服 务 器 

2、 以 下 哪些 选项 会 影响 NAS 设 备 性 能 () 
A、 文 件 目 录 过 大 过 深 
B、 设 备 过 载 
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@ 练 习题 


C、 存 储 阵列 降级 

D、 存 储 阵 列 设备 性 能 低下 

3、NAS 较 文件 服务 器 的 优势 有 ( ) 
A, HEE THES 

B、 数 据 安全 性 高 

C、 存 储 空间 大 

D、 具 有 容 灾 、 备 份 设计 
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答案 
1、ABC 
2、ABCD 
3、ABCD 


W Huawei 





0 490 


Thank you 


www.huawei.com 
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HC1109108 大 数据 存储 基础 
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OHI 


。 学 完 本 课程 ， 您 将 能 
o 了 解 大 数据 的 基本 概念 
o 理解 对 象 存储 技术 
o 了 解 大 数据 的 处 理 技术 
o 掌握 华为 大 数据 解决 方案 及 技术 
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全 目录 


. 大 数据 的 基本 概念 
技术 
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数字 的 宇宙 将 在 10 
ere 
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从 世界 诞生 之 日 至 2003， 人 们 共 创 造 出 5EB5- 而 2011 年 只 需要 不 到 2 天 便 能 产生 如 此 
多 的 信息 量 ， 而 2013 年 将 只 需要 10 分 钟 ， 而 到 2020 年 ， 每 年 创造 的 数据 容量 将 高 达 
357B， 导 致 数据 爆炸 的 原因 是 多 方面 的 : 


。 智能 终端 普及 ， 如 手机 ，lpag; 
。 人 们 分 享 与 沟通 需求 增加 ， 如 微 博 ， 微 信 ，Facebook 等 应 用 的 流行 ; 
。 网 络 高 速 发 展 ; 
。 数据 结构 发 生变 化 ， 视 频 、 图 片 占 绝 大 部 分 ; 
。 高 清 视频 、 图 片 的 大 量 产 生 ; 
以 上 诸多 原因 ， 导 致 海量 数据 的 存储 与 管理 成 为 所 有 IT 系统 必须 面 对 的 问题 。 
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什么 是 “大 数据 ? 


Mainframe  Minicomputer PC Desktopinternet > 
3 2.6EB 15.8EB 545EB 者 
CRM a - n par Sr f 





胃 “ 大 数据 ”， 就 是 用 现 有 的 常 (企业 中 的 关系 型 数据 库 ) ， 在 可 容 
A i N 


A 
F2 
SL 
N 
Q 
R 
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大 数据 的 组 成 


视频 
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MARRA, HASSA EEA ERAM ER RAS B EE 
文件 构成 。 


绝 大 多 数 的 海量 数据 具有 如 下 特征 : 
1、 一 次 写 入 ， 较 少 修改 。 如 太 量 的 视频 、 图 片 文 件 ， 保 存 之 后 主要 是 读 取 ， 很 少 


编辑 ; 

2、 数 据 价值 不 确定 .如 照片 和 视频 ， 可 能 因为 某 个 偶然 事件 ， 而 使 价值 增加 。 如 
某 人 在 某 一 段 时 间 内 成 为 焦点 人 物 ， 那 么 他 小 时 候 的 照片 就 变 得 有 价值 。 视 频 
监控 数据 也 有 类 似 特 征 。 你 不 知道 这 些 数据 什么 时 候 有 用 ， 但 你 不 能 轻易 把 它 
P}; 


3、 容 量 太 >、 增长 速度 快 ; 
、 需 要 保存 时 间 长 ; 有些 数据 可 能 要 保存 几 十 年 ， 甚 至 更 长 时 间 。 
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大 数据 的 4V 特 性 


ee: 


MEZE e © … 
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Volume: 全 球 在 2010 年 正式 进入 ZB KHR ADCmitE2020 年 ， 全 球 将 总 共 拥 有 
407B 的 数据 量 。 

Variety: 如 今 的 数据 类 型 早已 不 是 单一 的 文本 形式 ， 订 单 、 日 志 、 音 频 等 结构 化 数据 、 
半 结 构 化 数据 和 非 结 构 化 数据 共存 淮 非 结构 化 数据 快速 增长 ， 总 量 占 到 总 数据 量 
80%-90% ; 

Value: 沙 里 淘金 ， 价 值 密 度 低 y 一 部 数 小 时 的 视频 ， 有 价值 的 数据 可 能 仅仅 只 
两 秒 ; 


Velocity: 数 据 产 生 和 更 新 频率 极 高 ， 非 结构 化 数据 产生 速率 比 结构 化 数据 快 10-50 倍 ， 
是 传统 数据 仓库 的 10*50 倍 ; Facebook 每 天 产生 50TB 的 日 志 数 据 。 
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大 数据 产生 的 背景 


数据 多 源 化 软 硬 件 技术 发 展 云 计算 普 及 


Fi. Ey 


> 产生 于 日 常生 活 > 计算 性 能 提升 > 低 成 本 处 理 数据 
> 人 人 都 是 数据 创造 者 > 存储 性 价 比 提升 
> 分 布 式 处 理 技术 诞生 
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。 数据 多 源 化 
如 今年 的 数据 已 不 象 以 前 一 样 只 产生 于 某 些 领域 ， 安 装 在 汽车 上 的 GPS 系 统 ， 人 们 
日 常 使 用 的 手机 等 ， 都 是 数据 产生 源头 。 
。 软 硬 件 技术 发 展 
o 计算 机 的 计算 速度 按照 摩尔 定律 逐年 增加 ， 存 储 介质 的 存储 密度 大 幅 提 升 ， 单 
位 存储 容量 的 成 本 逐年 降低 ; 
o 大 量 的 非 结构 化 数据 是 大 数据 区 别 于 传统 数据 的 一 个 主要 特性 ; 传统 的 关系 形 
数据 库 无 法 处 理 急剧 增加 的 非 结构 化 数据 ， 基 于 Hadoop 的 分 布 式 数据 处 理 技 
术 不 断 浮现 、 使 非 结构 化 数据 处 理 成 为 可 能 
。 云 计 算 普 及 
大 数据 处 理 需 要 性 能 强大 的 软 硬 件 处 理 平 台 ， 搭 建 这 样 的 平台 是 一 笔 不 小 的 开支 ， 
对 于 一 些 规模 较 小 企业 可 能 无 法 承担 。 云 计算 的 laas 和 Paas 服 务 可 以 为 企业 提供 按 需 
付费 的 软 硬 件 平 台 服 务 ， 通 过 这 种 方式 ， 小 企业 同样 可 以 实现 大 数据 处 理 。 
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大 数据 的 价值 


将 会 发 生 什么 ? A 
Y 优 化、 预测 分 析 SS 


正在 发 生 什 么 ? 
pp =E 
为 什么 会 发 生 ? 
wvExcel、OLAP 分 析 
发 生 过 什么 ? 
v 报告 报表 
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大 数据 以 前 ， 人 们 对 数据 的 利用 主要 是 分 析 过 去 到 现在 发 生 了 什么 、 为 什么 会 发 生 ， 
并 做 出 报告 。 大 数据 的 核心 在 于 “预测 ” ,预测 将 基于 “数据 之 间 的 关联 性 ” 而 非 
“为 什么 是 这 样 的 因果 性 ”， 我 们 只 需要 按照 预测 出 来 的 趋势 去 响应 ， 使 用 这 些 结果 。 


通过 对 大 量 数 据 的 分 析 ， 从 中 发 现 数 据 中 蕴含 的 有 价值 的 规律 ， 从 而 预测 未 来 ， 是 
一 种 非常 有 意义 的 活动 。 例 如 : Google FE 2008 年 推出 了 “流感 趋势 ”网 站 。 它 建立 
的 假设 基础 是 : 人 们 在 遭受 疾病 困扰 时 ， 会 比 在 身体 健康 时 ， 花 更 多 的 时 间 搜 索 疾 病 相 
关内 容 。 因 此 ， 通 过 分 析 一 个 国 家 ， 在 特定 时 期 的 流感 相关 搜索 量 ， 便 可 以 推算 出 病毒 
的 传播 情况 。 这 个 预测 非常 靠 详 ， 通 常 与 美国 疾病 控制 和 预防 中 心 (CDC) 的 数据 相差 
无 几 。 事 实 上 ， 有 几 次 传染 病 初期 的 预测 ， 甚 至 比 CDC 早 了 一 周 之 久 。 众 所 周知 ， 疾 
病 初 期 预测 将 为 政府 及 时 采取 部 署 ， 提 供 了 有 利 的 时 机 。 
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对 象 存储 技术 


iSCSI/FC 


块 存储 对 象 存储 

。 直接 访问 ， 开 销 最 小 ， 。 更 易 管理 ， 更 易 与 应 用 对 接 。 。 结构 扁平 ， 近 全 无 限 的 容量 扩展 。 
效率 最 高 。 。 具备 一 定 扩展 性 ， 但 限制 较 多 1 . 更 加 智能 的 外 管理 入 性 。 

。 成 本 最 高 ， 扩 展 困难 。 场景 : 企业 内 部 应 用 整合 ， 久 。 业界 标准 互联 网 协议 ， 跨 地 域 传输 能 力 

。 场景 : 企业 数据 库 ， 件 共享 等 。 。 场景 : 面向 过 联网 服务 的 存储 ， 归 档 、 
Oracle 等 。 备份 等 。 
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对 象 存储 是 一 种 新 兴 存 储 技术 ， 对 象 存储 系统 综合 了 NAS 和 SAN 的 优点 ， 同 时 具有 
SAN 的 高 速 直接 访问 和 NAS 的 数据 共享 等 优势 ， 提 供 了 高 可 靠 性 、 跨 平台 性 以 及 安全 的 
数据 共享 的 存储 体系 结构 。 对 象 存 储 与 块 存储 、 文 件 存 储 的 对 比如 下 : 

1、 块 存储 对 存储 层 直接 访问 ， 开 销 最 小 ， 效 率 最 高 ， 速 度 最 快 。 但 成 本 最 高 ， 扩 展 
困难 。 块 存储 采用 SC3SVFC 协 议 让 很 难 跨 网 络 传输 。 适 合 的 应 用 场景 是 企业 数据 库 ， 如 
运行 Oracle 等 ; 

2、 文 件 存储 是 在 块 存储 之 上 构建 了 文件 系统 ， 采 用 目录 -目录 -文件 的 方式 组 织 数据 ， 
更 容易 管理 。 因 为 大 多 数 应 用 程序 都 是 对 文件 进行 操作 ， 因 此 文件 存储 更 容易 和 应 用 系 
统 对 接 。 文 件 系 统 受 目录 树 的 限制 ， 扩 展 性 受 限 ， 一 般 最 多 扩展 到 几 十 PB。 文 件 系 统 适 
用 于 企业 内 部 应 用 整合 ， 文 件 共享 场景 ; 


3、 对 象 存储 是 在 块 存储 之 上 构建 了 对 象 管 理 层 ， 与 文件 系统 相 比 ， 对 象 系统 层 是 扁 
平 的 ， 扩 展 限制 少 ,因此 拥有 近 平 无 限 的 扩展 性 。 对 象 由 唯一 的 Key， 文 件 ， 数 据 ( 文 
件 ) ， 元 数据 六 自 定 义 元 数据 构成 ， 由 于 包含 了 自 管 理 信息 ， 更 加 智能 。 对 象 存储 采用 
兼容 标准 的 互联 网 协议 接口 ， 可 以 跨 地 域 传输 。 对 象 存储 适用 于 面向 互联 网 服务 的 存储 
场景 以 及 企业 内 部 的 归档 、 备 份 场景 。 
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对 象 存储 结构 


a 元 数据 服务 器 
JC JJ 
G&S ats 


Ce 
对 象 存储 设备 
(OSD) 
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在 对 象 存储 系统 中 ， 元 数据 服务 器 (MDS 准 承担 起 了 文件 与 对 象 存储 设备 (OSD) 
的 映射 ， 文 件 与 目录 的 组 织 关 系 任务 。 它 提供 了 所 有 文件 系统 名 字 域 操作 ， 例 如 文件 查 
找 ， 文 件 创建 ， 文 件 和 目录 属性 处 理 。 从 客户 端 角度 去 看 元 数据 服务 器 好 似 是 文件 的 逻 
辑 窗口 ， 而 OSD 就 是 文件 的 物理 窗口 。N 当 用 户 对 茶 个 文件 进行 操作 ， 首 先 文 件 系 统 从 
MDS 上 获取 到 文件 的 实际 存储 地 址 *% 然后 根据 这 个 地 址 到 OSD 上 进行 存 取 操作 ， 后 续 
的 I/O 操 作 都 不 需要 再 访问 MDS， 这 样 减少 了 MDS 的 负担 ， 从 而 为 系统 的 扩展 提供 了 可 
能 性 。 


0 440 


数据 访问 模型 


L_] File names/inode 
Objects/OIDs 


传统 存储 
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传统 存储 文件 系统 采用 树 目录 的 形式 ， 当 文件 层 数 较 多 ， 且 文件 数量 比较 大 的 时 候 ， 
对 根 节 点 的 压力 比较 大 ， 要 去 查找 一 个 文件 耗 时 较 长 ， 影 响 性 能 。 对 象 存储 采用 扁平 化 
的 结构 ， 采 用 去 中 心 化 的 思想 ， 再 多 的 文件 在 访问 的 时 候 几 乎 不 受 影响 ， 系 统 能 很 方便 
的 扩容 。 
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对 象 存 储 的 优势 


采用 对 象 接口 ， 灵 活 分 割 数据 
对 象 扁平 化 ， 易 访问 扩展 
自动 化 管理 

多 租户 

数据 完整 性 和 安全 性 
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。 采用 对 象 接口 ， 灵 活 分 割 数据 

对 象 存储 对 外 提供 更 抽象 的 对 象 接骨 ， 而 不 是 SC5I 或 文件 接口 。 与 AN 存储 以 逻辑 
扇 区 为 单位 的 较 细 粒 度 的 固定 IO (512B~4KB) 不 同 ， 对 象 存储 IO 粒 度 更 有 弹性 ， 支 持 
几 个 字 节 (B) 到 数 万 亿 字 节 (TB) 范 围 内 的 任意 对 象 大 小 ， 使 得 业务 可 根据 需要 灵活 的 分 割 
数据 。 
。 对 象 扁平 化 ， 易 访问 扩展 

扁平 化 的 数据 结构 允许 对 象 存储 容量 从 TB 级 扩展 到 EB 级 ， 对 象 存储 系统 通常 在 一 个 
横向 扩展 〈 或 网 格 硬件 入 架构 业 构 建 一 个 全 局 的 命名 空间 ， 这 使 得 对 象 存储 非常 适用 在 
云 计算 环境 中 使 用 。 某 些 对 象 存储 系统 还 可 支持 升级 、 扩 容 过 程 中 业务 零 中 断 。 
。 自动 化 管理 

对 象 存 储 支持 从 应 用 角度 基于 业务 需求 设置 对 象 /容器 的 属性 〈 元 数据 ) 策略 ， 这 使 
得 对 象 存储 具备 云 的 自 服务 特征 同时 ， 有 效 的 降低 运 维 管理 的 成 本 。 
。 多 租户 

多 租户 特性 可 以 使 用 同一 种 架构 ,同一 套 系统 为 不 同 用 户 和 应 用 提供 存储 服务 ,并 分 别 
为 这 些 用 户 和 应 用 设置 数据 保护 、 数 据 存储 策略 ， 并 确保 这 些 数据 之 间 相 互 隔离 。 
。 数据 完整 性 和 安全 性 

对 象 存储 系统 一 般 通 过 连续 后 台数 据 扫 描 、 数 据 完整 性 校 验 、 自 动 化 对 象 修复 等 技 
术 ， 新 型 的 技术 应 用 大 大 提高 数据 的 完整 性 和 安全 性 。 

华为 N9000 设 备 采 用 的 就 是 对 象 存储 的 技术 ， 提 供 大 数据 的 解决 方案 ， 在 后 面 深 入 
的 介绍 。 
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大 数据 的 基本 概念 
生 储 技术 
. 大 数据 处 理 技术 
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大 数据 处 理 流程 
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针对 大 数据 处 理 的 流程 与 一 般 数 据 处 理 济 程 基本 一 致 ， 包 括 数据 采集 、 数 据 存储 、 
数据 管理 、 数 据 分 析 四 个 环节 。 

数据 采集 是 利用 多 种 途径 、 方 法 和 工具 来 获取 所 需要 的 数据 ， 为 后 续 数 据 分 析 提 供 
依据 。 在 大 数据 的 背景 下 ， 需 要 采集 什么 数据 ? 通过 什么 途径 采集 数据 ? 运用 什么 方法 
采集 数据 ? 利用 什么 工具 实现 更 高 效 的 数据 采集 ? 等 都 是 我 们 必须 关注 的 问题 。 

数据 存储 是 对 采集 到 的 数据 在 进行 数据 分 析 前 实现 数据 的 传输 和 存储 。 随 着 大 数据 
背景 下 数据 量 级 数 级 增长 ,传统 的 数据 存储 方式 已 经 很 难 承载 大 数据 存储 的 需求 ， 因 此 
需要 采用 更 新 的 技术 来 实现 数据 存储 。 

数据 管理 是 数据 存储 的 延伸 。 在 数据 存储 的 基础 上 对 数据 进行 深加工 ， 进 一 步 实 现 
数据 细 分 ， 为 后 续 数 据 分 析 提供 直接 可 用 的 元 数据 ， 提 升 数据 分 析 的 效率 。 

数据 分 析 是 利用 数据 分 析 的 方法 、 模 型 、 工 具 对 数据 进行 分 析 ， 最 终 得 出 分 析 结 果 ， 
以 此 满足 大 多 数 常见 的 分 析 需 求 。 基 于 前 面 分 析 和 查询 的 数据 进行 更 深入 的 数据 挖掘 ， 
可 以 满足 更 高 级 别 的 数据 分 析 需 求 。 

本 章 重 点 围绕 数据 存储 以 及 数据 存储 的 延伸 一 一 数据 管理 来 介绍 大 数据 的 关键 技术 。 
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在 介绍 大 数据 关键 技术 前 ， 为 便于 理解 ， 我 们 先 通 过 简单 的 图 表 形 式 来 介绍 大 数据 
的 一 些 技术 概念 。 这 里 我 们 通过 河流 的 船 运 来 描述 从 “数据 ”到 “大 数据 ”的 技术 变化 。 


当 只 有 少量 的 货物 需要 运输 上 时， 我 们 可 以 使 用 小 船 ， 当 需要 运输 的 货物 数量 增 大 
时 ， 就 需要 造 大 一 些 的 船 来 运输 ， I 趴 物 数 量变 得 很 大 时 ， 我 们 就 不 能 通 
过 造 更 大 的 船 来 运输 ， 因 为 河流 的 水 深 是 一 定 ， 船 太 大 反而 无 法 通行 。 既 然 船 不 能 做 的 
无 限 大 ， 而 需要 运输 货物 数量 又 越 林 越 大 ， 那么 怎么 来 提高 运载 效率 呢 ? 大 家 知道 ， 我 
们 可 以 通过 使 用 多 条 小 一 些 的 船 分 别 运输 来 解决 问题 。 需 要 运输 的 货物 数量 不 断 增加 时 ， 
我 们 可 以 增加 更 多 的 小 船 尺 是 需要 做 好 码头 和 航运 的 管理 就 可 以 了 。 


同样 ， 在 大 数据 时 代 ， 我 们 也 不 可 能 采用 无 限 升 级 CPU、 内 存 、 磁 盘 容量 等 硬件 能 
力 来 满足 大 数据 处 理 的 需求 ， 而 是 通过 采用 新 的 方式 来 处 理 ， 即 分 布 式 并 行 处 理 。 分 布 
式 并 行 处 理 方式 的 核心 是 充分 利用 了 扩展 性 (类 似 于 船 运 中 河流 的 宽度 ) ， 并 发 的 进行 
数据 处 理 。 它 不 在 是 以 往 那 种 部 件 扩展 (CPU 内 存 等 ) 而 是 组 件 级 的 扩展 。 分 布 式 并 行 
处 理 扩 展 更 灵活 ， 承 载 能 力 更 大 ， 但 是 需要 更 强 的 调度 和 协调 能 力 ， 也 就 是 管理 上 变 得 
复杂 了 ， 需 要 统一 架构 ， 统 一 管理 。 当 然 这 个 复杂 不 是 对 外 的 而 是 指 对 编写 程序 的 复杂 
度 和 代码 的 执行 效率 要 求 更 高 了 。 
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我 们 在 大 数据 的 4Y 特 征 中 介绍 了 其 中 一 个 V= 一 VALUE 价 值 密度 ， 这 个 价值 密度 是 
指数 据 的 价值 比例 。 有 些 数据 价值 密度 会 低 志 些 ， 单 看 每 一 条 感觉 用 处 都 不 大 ， 但 从 大 
量 的 低 价值 数据 中 整合 分 析 可 以 获得 高 价值 的 结果 (比如 互联 网 数据 ) 。 对 于 企业 的 一 
些 数 据 ， 尤 其 是 数据 库 形成 的 数据 ， 它 的 每 一 条 都 很 重要 ， 和 针对 这 些 不 同类 型 的 大 数据 ， 
应 采用 不 同 的 处 理 手段 。 


如 图 示 中 ， 廉 价 货物 使 用 普通 船 运 输 。 同 理 ， 价 值 密度 低 数 据 对 存储 无 特殊 要 求 ， 
通常 采用 不 带 任 何 增值 特性 的 廉价 存储 。 中 高 价值 货物 使 用 专业 船 来 运输 ， 保 证 货物 的 
安全 和 运输 效率 。 同 样 A 在 大 数据 处 理 中 ， 高 价值 密度 数据 对 存储 有 较 高 要 求 ， 需 要 专 
业 含 有 多 种 保护 机 制 及 增值 特性 的 存储 ， 从 而 保证 数据 存储 的 安全 性 和 高 性 能 。 


大 数据 的 技术 概念 一 数据 处 理 方式 
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我 们 看 到 对 不 同 价值 数据 处 理会 有 不 同 处 理 方 式 ， 不 仅 体 现在 存储 技术 的 选择 上 
( 船 ) ， 在 数据 管理 上 也 会 有 所 不 同 。 在 第 二 艘 船 中 ， 数 据 在 加 载 过 程 中 不 做 任何 处 理 ， 
直接 传递 给 分 析 工 具 ， 由 分 析 工 具 进 行 数据 处 理 ， 那 么 分 析 工 具 据 需要 承担 大 量 的 数据 
筛选 工作 。 第 二 艘 中 ， 数 据 做 了 粗 加 工 处 理 ， 然 后 传递 给 分 析 工 具 ， 分 析 工 具 减 少 负 担 ， 
会 更 快 的 给 出 结果 。 第 三 艘 船 中 ,/ 数据 在 运载 过 程 中 做 了 分 门 别 类 的 整理 、 细 加 工 处 理 ， 
然后 传递 给 分 析 工 具 ， 分 析 工 具 直 接 叶 入 数据 ， 给 出 结果 ， 分 析 工 具 不 需要 承担 额外 的 
消耗 ， 专 心 做 分 析 处 理 。 
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从 数据 结构 特征 来 分 类 ， 主 要 可 以 分 为 : 结构 化 数据 、 非 结构 化 数据 和 半 结 构 化 数 
据 。 


结构 化 数据 即 指 可 以 用 二 维 表 结 构 来 逻辑 表达 实现 的 数据 ， 简 单 来 说 就 是 数据 库 o 
比如 企业 ERP、 财 务 系统 、 医 疗 HIS 数 据 库 、 教 育 一 卡通 、 政 府 行政 审批 等 。 


非 结构 化 数据 ， 即 不 方便 用 数据 库 二 维 逻 辑 表 来 表现 的 数据 。 包 括 所 有 格式 的 办 公 
文档 、 文 本 、 图 片 、XML、HTML, 各 类 报表 、 图 像 和 音频 /视频 信息 等 等 。 比 如 医疗 影 
像 系统 、 教 育 视频 点 播 、 视 频 监 控 、 国 土 GIS、 设 计 院 、 文 件 服务 器 (PDM/FTP) 、 媒 
体 资源 管理 等 。 

半 结 构 化 数据 ,包括 邮件 、HTML、 报 表 、 资 源 库 等 等 ， 典 型 场景 如 邮件 系统 、WEB 
集群 、 教 学 资源 库 、 数 据 挖 掘 系 统 、 档 案 系 统 等 等 。 

在 这 里 我 们 主要 分 析 两 类 大 数据 应 用 场景 ， 一 类 是 以 互联 网 为 代表 ， 其 90% 以 上 数 
据 都 是 非 结构 化 数据 ， 如 Google, EHFacebook, Twitter ,新 浪 等 ， 数 据 以 非 结构 化 
为 主 。 另 二 类 以 运营 商 为 代表 ， 其 80% 以 上 是 结构 化 为 主 的 大 数据 。 针 对 这 两 种 大 数据 
代表 形式 ， 在 业界 会 有 不 同 的 技术 处 理 方式 。 
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针对 以 非 结 构 化 数据 为 主 的 互联 网 大 数据 技术 处 理 技术 比较 有 代表 性 的 是 Hadoop。 
Hadoop 是 一 种 开源 的 对 大 规模 数据 进行 分 布 式 处 理 的 技术 框架 ， 在 处 理 大 数据 中 非 结 
构 化 数据 上 有 着 性 能 和 成 本 方面 的 优势 。 


Hadoop 主 要 分 为 三 个 部 分 ， 分 别 是 : NHDFS (Hadoop Distributed File System) 分 
布 式 文件 系统 、Hbase (Hadoop Database) 非 关 系 型 数据 库 和 MapReduce 分 布 式 并 
行 处 理 架 构 。 

HDFS 有 着 高 容错 性 的 特点 ， 并 且 设 计 用 来 部 署 在 低廉 的 (low-cost) 硬件 上 ， 用 
来 在 各 个 计算 节点 上 存储 数据 ， 并 提供 了 对 数据 读 写 的 高 吞吐 率 。 HDFS 使 用 的 是 廉价 
的 存储 ， 对 存储 无 特殊 要 求 ， 可 以 是 服务 器 上 的 存储 ， 也 可 以 是 专业 存储 。 它 不 含有 任 
何 数据 保护 的 增值 特性 , 每 次 存储 三 份 数 据 ， 用 多 份 数据 存储 来 保证 数据 的 可 靠 性 ， 对 
底层 硬件 的 可 靠 性 要 求 不 高 。 


Hbase (Hadoop Database) 是 非 关 系 型 数据 库 的 一 种 ， 是 构建 在 HDFS 之 上 的 分 布 式 、 
面向 列 的 存储 系统 。 它 具有 高 可 靠 、 高 性 能 、 面 向 列 和 可 伸缩 的 特性 。HBase 适 合 于 存 
储 大 表 数 据 \( 表 的 规模 可 以 达到 数 十 亿 行 以 及 数 百 万 列 ) ， 并 且 对 大 表 数 据 的 读 、 写 访 
问 可 以 达到 实时 级 别 。 


MapReduce 是 Google 提 出 的 一 种 简化 并 行 计算 的 编程 模型 ， 名 字源 于 该 模型 中 的 两 
项 核心 操作 : Map 和 Reduce。Map 将 一 个 任务 分 解 成 为 多 个 任务 ，Reduce 将 分 解 后 多 任 
务 处 理 的 结果 汇总 起 来 ， 得 出 最 终 的 分 析 结 果 。 最 具有 代表 性 的 开源 实现 是 Apache 的 
Hadoop MapReduce。 
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HERAA RRA REOR R ERA E SEARE ERD RE 
体现 在 数据 库 管 理 上 。 


相 比 于 互联 网 大 量 低 价值 数据 而 言 ， 企 业 数 据 价值 远 远 高 出 很 多 ， 因 此 需要 更 可 靠 、 
更 高 性 能 的 存储 支撑 。 前 面 介绍 的 HADOOP 采 用 存储 三 份 数据 ， 用 多 份 数据 存储 来 保证 
数据 的 可 靠 性 ， 没 有 任何 软件 保 殷 机 制 ， 硬 件 失效 是 常态 的 处 理 方式 并 不 适合 企业 应 用 。 


传统 关系 型 数据 库 使 用 时 间 发 ， 配 套 工具 多 ， 稳 定性 可 靠 性 高 。 但 是 由 于 层级 关系 
复杂 ， 导 致 分 支 越 多 处 理 时 间 消 耗 越 多 ,因此 扩展 能 力 弱 。 难 以 处 理 TB 级 数据 ， 不 能 很 
好 的 支持 高 级 别 的 数据 分 析 。 


并 行 数据 库 系 统 (Parallel Database System) 是 新 一 代 高 性 能 的 数据 库 系统 ， 其 原 
理 是 把 本 来 很 复杂 的 关系 分 解 到 各 个 独立 单元 中 区 ， 这 些 单元 彼此 封闭 ， 单 个 单元 中 关 
系 级 层 少 ， 这 是 分 布 型 关系 数据 库 的 核心 。 把 大 库 变 成 多 个 小 库 分 布 在 不 同 的 节点 上 ， 
并 行 计 算 一 个 单元 损坏 不 影响 其 它 单元 的 运作 ， 而 且 继 承 了 关系 型 数据 的 的 所 有 的 优势 。 


利用 并 行 数据 库 ， 我 们 还 可 以 在 运载 和 存储 数据 过 程 中 对 数据 做 更 细 的 分 类 ， 在 需 
要 进行 数据 分 析 处 理 时 ， 分 工具 BI 不 需要 再 做 数据 分 类 处 理 ， 直 接 进 行 数据 分 析 得 出 分 
析 结 果 ， 大 大 提升 了 数据 分 析 处 理 的 效率 。 
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NoSQL， 泛 指 非 关 系 型 的 数据 库 ,在 应 对 Web2.0 超 大 规模 和 高 并 发 的 动态 网 站 时 ， 
比 传统 关系 型 数据 库 更 灵活 ， 大 数据 量 高 性 能 ， 易 扩展 。NoSQL MapReduce 和 关系 型 
数据 库 不 是 互相 取代 ， 而 是 互相 补充 信 需要 互相 学 习 取长补短 。 
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华为 Oceanstor ?9000 大 数据 解决 方案 ,和 集 大 数据 的 存储 、 备 份 、 分 析 为 一 体 化 
(统一 管理 、 统 一 硬件 平台 、 同 一 组 网 ) ， 极 大 简化 组 网 和 管理 复杂 度 ; 文件 系统 直接 
管理 底层 磁盘 ， 减 少 了 复杂 的 RAID 配 置 、LUN 划 分 等 步骤 ; 


所 有 的 节点 都 统一 于 Oceanstor 9000 硬 件 平台 ， 内 部 网 络 适用 10GE 或 者 是 
Infiniband High-speed, KikHOceanStor ?2000 可 以 在 保障 低 延 时 、 高 带宽 、 高 并 发 
的 同时 表现 极 好 的 性 能 。 为 予 匹 配 不 同 的 应 用 场景 ，Oceanstor 9000 的 节点 分 为 高 
OPS 节 点 、 高 带宽 节点 和 大 容量 节点 ， 用 户 可 以 根据 不 同 的 商业 性 能 和 容量 的 需求 ， 灵 
活 的 配置 不 同 节点 的 数量 。 


OceanStor 9000 支 持 多 种 接口 与 数据 类 型 ， 如 NAS 接 口 NFS、ClFS 和 POSIX; 目标 
接口 REST 和 SOAP, 数 据 库 接口 JDBC 和 ODBC; 备份 归档 接口 VTL,OST 等 。 应 用 这 一 特性 ， 
Oceanstor 9000 解 决 方案 完全 可 以 胜任 核心 生产 数据 存储 ， 商 业 数 据 存 储 与 分 析 。 
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文件 系统 关键 技术 :统一 命名 空间 


CEE EN ERENER 
。 特性 描述 
5 对 外 提供 统一 的 文件 系统 命名 空间 ， 该 空间 可 以 使 用 和 管理 系统 的 全 部 隔 用 容量 


o 将 文件 系统 空间 以 目录 的 形式 对 外 呈现 
o 命名 空间 随 系统 启动 自动 创建 ， 其 名 字 和 系统 名 字 一 致 
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WusnonFs 为 运行 于 Linux 操 作 系统 之 上 的 分 布 式 文件 系统 ， 让 存储 节点 集群 统一 对 
外 提供 CIFS 与 NFS 文 件 共享 服 务 。 


Wushan 分 布 式 文件 系 采用 全 对 称 结构 ， 将 所 有 节点 的 命名 空间 整合 为 统一 命名 空 
间 ， 将 整个 系统 的 所 有 节点 的 存储 容 个 大 的 虚拟 存储 池 ， 元 数据 和 数据 保存 在 
每 个 节点 上 ， 每 个 节点 都 是 元 数据 服务 器 同时 也 是 数据 服务 器 ， 访 问 文件 数据 时 
wushamn 文 件 系 统 首先 定位 到 文件 所 归属 的 元 数据 服务 器 ， 然 后 通过 元 数据 服务 器 获取 
文件 的 数据 分 布 ， 即 获取 六 件 分 布 在 哪些 节点 上 以 及 在 节点 上 的 具体 位 置 ， 再 去 访问 这 
些 节点 完成 数据 读 写 操 作 % 


。 客户 价值 
o 为 用 户 提 供 统 二 的 存储 资源 池 ， 不 论 系 统 规模 多 大 ， 都 可 以 集中 进行 管理 和 分 
配 
o 系统 扩容 时 ， 扩 充 的 容量 可 直接 被 纳入 资源 池 使 用 ， 和 避免 维护 多 套 存 储 设备 的 
困难 。 
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CA: Client Agent 
MDS: Metadata Service 
DS: Data Service 





使 用 动态 子 树 方式 组 织 元 数据 


将 命名 空间 中 的 所 有 元 数据 按照 名 宗 子 树 的 方式 划分 ， 每 棵 名 字 子 树 划 分 给 一 个 
MDS 处 理 。 一 个 MDS 可 以 管理 若干 棵 子 树 。 


正常 处 理 流程 : CA 将 报 文 发 给 任意 一 个 MDS， 该 MDS 查 询 本 地 动态 子 树 表 ， 如 果 属 
于 本 地 MDS 处 理 范围 ， 则 直接 处 理 。 如 果 不 属 于 则 将 该 请 求 转交 给 负责 该 名 字 子 树 
的 MDS (如 果 无 法 直接 找 款 则 转 给 最 可 能 负责 该 名 字 子 树 的 MDS) 


故障 迁移 : 一 全 MDs 故 障 后 y 其 他 MDS 将 分 担 故 障 MDS 负 责 管理 的 名 字 子 树 。 


负载 均衡 : 当 MD3 数 组 增 减 或 某 个 MDY 负 责 的 名 字 子 树 访问 过 冷 / 过 热 时 ， 会 采用 负 
载 均衡 策略 ， 将 过 热 节 点 上 的 名 字 子 树 部 分 迁移 到 较 冷 节点 oh 
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Erasure Code 的 基本 原理 


QW 分 File 为 4G8 大 
小 的 Chunk ( 小 于 该 
值 时 不 切 分 ) 


人 @ 切 分 Cchunk 为 { 


128KB 的 Strip 


LE eii Stip1 Strip2 Strip 3 
阵 运算 生成 m 份 
RMS 


CA PTE EN ~ ee | ai 


( 以 4+ 2 模式 为 例 ) 


File: 文件 
Chunk: 块 
Stripe: 分 条 
Strip: 条 带 
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Strip 大 小 缺 省 为 128KB, 当 数据 不 足 128KB 时 $_Strip 可 以 为 16KB 的 整数 倍 。 
当 预 期 一 个 目录 内 平均 文件 大 小 小 于 3912KB 时 ， 为 提升 硬盘 利用 率 ， 


定 该 目录 内 所 有 文件 采用 的 Strip 大 小 为 NOKB。 


管理 员 可 手工 指 


OceanStor 9000 关 键 技术 概览 
负载 均衡 


分 级 存储 
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负载 均衡 
o 负载 均衡 特性 ， 提 供 接 入 负载 均衡 、 域 名 访问 和 节点 故障 后 业务 无 中 断 切换 功能 。 
分 级 存储 


o 自动 分 级 存储 特性 ， 可 实现 热 数据 与 冷 数 据 在 不 同 存储 级 别 间 的 智能 存储 和 动态 
迁移 。 


全 局 缓存 


a Oceanstor 92000 通 过 全 局 缓存 模式 ， 整 合 所 有 节点 缓存 ， 同 一 文件 的 数据 在 缓 
存 池 只 缓存 一 份 ， 任 意 节 点 均 可 命中 ， 有 效 提高 数据 访问 命中 率 ， 减 少 硬 盘 读 写 
次 数 ， 降 低 访问 时 延 ， 提 升 系统 整体 性 能 。 


文件 系统 


o WushaonFs 为 运行 于 Linux 操 作 系统 之 上 的 分 布 式 文 件 系 统 ， 让 存储 节点 集群 统一 
对 外 提供 CIFS 与 NFS 文 件 共享 服务 。 


Erasure Code 


o OceanStor 9000 采 用 Erasure Code 算 法 ， 提 供 更 多 的 数据 宛 余 ， 由 于 采用 数据 
切片 的 技术 ， 在 数据 恢复 时 效率 更 高 。 


配额 管理 

a OceanStor 9000 提 供 的 配额 类 型 包括 
= 容量 配额 : 管理 和 监控 存储 空间 的 使 用 情况 。 
= 文件 数 配额 : 管理 和 监控 文件 数量 的 使 用 情况 。 
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OceanStor 9000 软 件 架 构 


CA: Client Agent 
MDS: Metadata Service 
DS: Data Service 





NASIE R a N 


( p) 
m _ à | NESICIFS | | NFSICIFS | | NEFSICIFS X 
evice Manager Er “、、 BH Fi 
i : 
== 7" {Manager y CA y `j y Monitor 
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访问 协议 集群 域名 

和 服务 端 建立 连接 /发 起 业务 

业务 下 发 任务 给 CA ( OceanStor 9000 内 部 访问 客户 端 
CA 向 MDS ( 元 数据 服务 ) 查询 元 数据 

返回 查询 结果 (图 上 画 了 一 次 ,实际 可 能 有 多 次 交互 ) 
CA 从 多 个 节点 读 取 数 据 和 校 验 数据 

返回 数据 

CA 向 NAS 服 务 器 返回 结果 

NAS 服 务 器 向 客户 端 返回 结果 


OceanStor 9000 硬 件 结构 


Performance 


前 视图 
node( 倍 称 


后 视图 





Capacity node (f 
称 C Node) 





后 视图 


前 视图 


后 视图 
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OceanStor 2000 的 硬件 系统 主要 由 存储 节点 、 网 络 设备 、KVM 和 调制 解 调 器 组 成 。 


存储 节点 可 选用 P 节 点 ,C 节 点 和 M 节 点 ，P 节 点 适用 OP 密集 型 应 用 的 场景 ，C 节 点 
用 高 带宽 应 用 场景 ,M 节 点 适用 于 小 办 量 启用 场 时 。 
。 P 节 点 


o 2U 25 盘 (2.5 寸 数据 盘 ) 设备 

o 标 配 : 2 路 6 核 CPUK 48G 内 存 ， 

n 4*200G S$D+21*600G SAS 盘 
。 CH 

o 4U 36 盘 (3.5 寸 数据 盘 ) 设备 

o 标 配 : 2 路 6 核 CPU ，48G 内 存 ，1*200G SSD+35*4T SATA 盘 
。 M 节 点 

EN2U 12 盘 (3.5 十 数据 盘 ) 设备 

off: 2 路 4 核 CPU ，32G 内 存 ，1*200G SSD+11*2T SATA 盘 
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: 。 组 网 特点 
| ARAMAN 
。 ARRAMA 
a FH HAE 
连接 各 节点 管理 
An, FERE 
理 服务 器 
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e OceanStor 9000 的 组 网 结构 包括 前 端 业务 网 络 和 后 端 存储 网 络 。 
e OceanStor 9000 的 组 网 结构 包括 : 

o 前 端 业务 网 络 用 于 OceanStonm9000 与 用 户 网 络 对 接 ; 

o 后 端 存储 网 络 用 于 Ocearistor 9000 内 部 节点 间 互 联 ; 

a IPMI 网 络 用 于 Oceahstor 9000 与 用 户 维护 网 络 对 接 。 


OceanStor 9000 支 持 多 种 组 网 方式 ， 包 括 10GE 组 网 、IB 组 网 和 GE 组 网 等 ， 可 满 


足 用 户 的 不 同 组 网 需求 。 
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大 规模 数据 中 心 应 用 场景 


大 数据 和 高 性 能 企业 私有 云 业务 


soil Ts 全 二 
数据 共享 Bl 据 分 析 
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o 全 球 领先 的 读 写 性 能 ， 性 能 超过 500 万 +， 可 以 很 好 的 满足 高 性 能 应 用 的 需求 
数据 快速 迁移 

o 存储 到 分 析 数 据 快速 装载 站 智能 流动 

o 快速 查询 : 最 快 一 秒 钟 可 检索 100 亿 条 记录 
数据 智能 生态 链 

o 数据 存储 、 分 析 、 归 档 一 体 的 全 生命 周期 管理 
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总 结 


大 数据 的 定义 与 特性 

对 象 存储 技术 

大 数据 处 理 技术 

华为 OceanStor 9000 大 数据 产品 架构 与 特性 
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@ 思 考题 


1. 大 数据 与 传统 数据 的 主要 区 别 是 什么 ? 

2. 对 象 存储 系统 由 哪些 部 分 组 成 ? 

3. 传统 关系 型 数据 库 为 什么 不 适用 于 大 数据 ? 
4. 华为 大 数据 产品 是 什么 ， 有 哪些 特性 ? 
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QAJT 


。 判断 题 
1、 Hbase 是 NoSQL。 ( ) 
2、HDFSs 不 含有 任何 数据 保护 的 增值 特性 ， 每 次 存储 三 份 数据 ， 
多 份 数 据 存储 来 保证 数据 的 可 靠 性 ， 对 底层 硬件 的 可 靠 性 要 求 不 
高 ( ) 


3、 NoSQL MapReduce 将 取代 关系 型 数据 库 ( ) 
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@ 练 习题 


。 多 选 题 
1、 大 数据 有 哪些 特性 ? (  ) 
A, Volume 
B, Variety 
C、 Value 


D, Velocity 


2, Æ}OceanStor 9000 大 数据 解决 方案 的 主要 特点 包括 ?2 人、_ 施 
A、 集 大 数据 的 存储 、 和 备份、 分析 为 一 体 化 
B、 保 障 低 延 时 、 高 带宽 、 高 并 发 的 同时 表现 极 好 的 性 能 
CS、 支持 多 种 接口 与 数据 类 型 
D、 分 为 高 OPS 节 点 、 高 带宽 节点 ， 用 户 可 以 根据 不 同 的 商业 性 能 和 容量 的 需求 ， 灵 活 的 配置 
不 同 节 点 的 数量 
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口 判断 题 : 1、 T 2x T 3% F 
a 多 选 题 : 1]、ABCD 2, ABCD 
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Thank you 
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目标 


。 学 完 本 课程 后 ， 您 将 能 够 : 
o 了 解 备份 概念 及 拓扑 结构 
o 理解 备份 技术 
o 掌握 备份 策略 制定 
o 熟悉 华为 备份 实现 与 应 用 
了 解 容 灾 
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QAF : 


. 备份 概念 及 拓扑 结构 
备份 技术 
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什么 是 备份 


。 在 信息 技术 与 数据 管理 领域 ， 备 份 指 将 文件 系统 或 数据 库 系 统 中 的 数据 加 
以 复制 ; 一 旦 发 生 灾难 或 错误 操作 时 ， 得 以 方便 而 及 时 地 恢复 系统 的 有 效 
数据 和 正常 运作 。 


x 


应 用 服务 器 
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在 一 套 备份 系统 中 ， 通 常 包括 以 下 组 件 : 


。 备份 服务 器 
备份 服务 器 是 运行 备份 软件 的 载体 ， 记 般 是 PC 服务 器 和 小 型 机 。 
。 备份 软件 


备份 系统 的 核心 ， 备 份 软件 控制 生产 数据 拷贝 到 存储 介质 上 ， 并 对 备份 数据 进行 管理 ， 
如 Symqntec 的 Backup Exec 和 和 NetBackup 等 。 


。 存储 设备 
备份 数据 存储 的 设备 ,一 般 为 磁盘 阵列 、 物 理 磁带 库 或 者 虚拟 带 库 。 


备份 软件 架构 


。 NBU 软 件 备份 架构 
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。 NBU 备 份 软件 组 件 主要 有 : 


o Master Server 人 (管理 服务 器 } 对 备份 系统 的 个 模块 的 系统 管理 ， 对 备份 策略 、 备 份 
任务 以 及 数据 恢复 的 配置 界面 和 过 程 监控 


a Media Server (介质 服务 器 ) 负责 介质 设备 的 管理 ， 和 介质 设备 通信 、 读 写 管 理 ， 
是 备份 服务 器 和 介质 的 中 间 件 。 


o Client (备份 用 户 端 ) 备份 目标 设备 ， 软 件 模块 client 负 责 和 Master server 通 信 
交换 信息 。 


a Agent (数据 库 代理 ) 只 在 数据 库 备份 时 需要 。 


o Management Console (管理 终端 ) 是 用 户 GUI， 可 视 化 操作 界面 ， 管 理 备 份 
软件 操作 。 
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常用 备份 拓扑 LAN-BASED 


e LAN-BASED 


备份 服务 器 
介质 服务 器 


文件 服务 器 应 用 服务 器 


数据 流 


EAST 
指令 流 
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基于 LAN 的 备份 ， 数 据 流 和 控制 流 都 基于 LA 传输， 占用 网 络 资源 的 备份 模式 。 


备份 数据 流向 : 备份 服务 器 通过 LAN 发 控制 流 到 安装 了 代理 的 应 用 服务 器 上 ， 应 用 服务 
器 响应 请 求 通过 LAN 发 送 数据 到 备份 服务 器 》 备份 服务 器 接收 数据 存储 到 存储 设备 上 ， 完 
成 备份 。 


。 优点 : 
o 备份 系统 和 应 用 系统 分 开 备份 时 不 占用 应 用 服务 器 的 硬件 资源 。 


o 增加 额外 的 备份 服务 器 硬件 投资 成 本 。 

o 备份 的 代理 会 影响 应 用 服务 器 的 性 能 

o 备份 数据 基于 LAN， 影 响 网 络 性 能 

o ”需要 单独 维护 备份 业务 ， 增 加 管理 和 维护 的 难度 。 
o 信 对 用 户 业 务 处 理 能 力 的 要 求 较 高 


常用 备份 拓扑 LAN-FREE 


e LAN-FREE 


= LAN 


li 备份 服务 器 
介质 服务 器 


AE) 一 一 一 一 


指令 流 
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顾名思义 不 占用 LAN 资 源 ， 控 制 流 基于 LAN 传 输 ， 数 据 流 不 经 过 LAN。 


备份 数据 流向 : 备份 服务 器 通过 LAN 发 控制 流 到 安装 了 代理 的 应 用 服务 器 上 ， 应 用 服务 
器 啊 应 请 求 读 取 生 产 数 据 ， 介 质 服 务 器 直接 从 应 用 服务 器 上 读 取 数 据 传 输 到 备份 介质 上 ， 
完成 备份 。 


。 优点 : 

o 备份 数据 流 不 占用 EAN 资源 ， 大 大 提高 备份 性 能 ， 且 不 影响 用 户 网 络 性 能 。 
@ 缺点 : 

o 备份 的 代理 会 影响 应 用 服务 器 的 性 能 。 

o 对 用 户 业 务 处 理 能 力 的 要 求 较 高 。 
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备份 系统 的 组 成 


备份 软件 备份 介质 备份 服务 器 


完成 备份 策略 的 制定 、| | 磁带 库 用 于 安装 备份 软件 的 

备份 介质 的 管理 以 及 磁盘 阵列 服务 器 ， 通 过 备份 服 复 

一 些 其 它 扩展 功能 虚拟 磁带 库 务 器 预先 制定 的 备份 
光盘 塔 /光盘 库 ATRESI 
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完整 的 备份 系统 通常 是 由 备份 软件 、 备 份 介质 和 备份 服务 器 构成 的 。 


备份 软件 被 用 于 制定 具体 的 备份 策略 % 同时 对 备份 介质 进行 管理 并 应 用 备份 介质 进行 
数据 的 备份 操作 。 通 过 备份 软件 的 应 用 可 以 实现 针对 应 用 数据 、 应 用 程序 甚至 是 应 用 系统 
的 全 面 保 护 。 一 些 扩展 的 备份 软件 能 够 实现 更 多 的 功能 。 完 善 的 备份 与 恢复 解决 方案 设计 
用 于 保护 、 备 份 、 归 档 和 恢复 各 类 计算 环境 中 的 数据 ， 这 些 环境 包括 大 型 公司 数据 中 心 、 
远程 组 、 台 式 机 及 笔记 本 电脑 总 通过 备份 软件 相 集成 可 以 提供 数据 整个 生命 周期 内 的 管理 
解决 方案 从 创建 到 处 理 从 现场 和 非 现 场 方式 ， 跨 越 存 储 层 次 的 所 有 级 别 , HET 
磁盘 、 磁 融和 光学 存储 介质 。 备 份 软件 的 应 用 将 能 够 做 好 更 充分 的 准备 ， 并 且 更 加 轻松 地 
从 设备 故障 、 病 毒 攻击 或 意外 丢失 文件 中 恢复 。 


传统 的 备份 介质 通常 是 磁带 库 。 除 了 传统 的 磁带 库 备份 介质 以 外 ， 还 有 基于 磁盘 的 备 
份 介质 及 虚拟 磁带 库 (VTL) 。 


安装 了 备份 软件 的 应 用 服务 器 就 是 备份 服务 器 ， 备 份 服务 器 提供 了 备份 软件 运行 的 环 
境 ， 并 且 为 备份 策略 的 执行 提供 服务 。 在 某 些 备份 架构 中 ， 备 份 服务 器 不 仅 提 供 到 存储 设 
备 或 者 应 用 服务 器 的 备份 指令 流 ， 甚 至 也 会 接收 应 用 发 送 过 来 的 数据 流 并 由 其 将 数据 送 往 
备份 介质 进行 统一 、 集 中 备份 ， 所 以 备份 服务 器 在 备份 架构 中 起 着 中 枢 的 作用 。 
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常见 的 备份 结构 一 一 D2D 


。 D2D: 磁盘 -磁盘 的 数据 备份 


主 存储 阵列 主 存储 阵列 备份 存储 阵列 


备份 数据 流 ---- 





Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. A HUAWEI 


一 个 应 用 系统 的 数据 备份 决定 了 该 系统 的 可 靠 性 及 可 维护 性 ， 因 此 ， 数 据 备份 系统 的 
建设 要 充分 考虑 可 靠 性 、 可 管理 性 及 维护 成 本 等 几 方面 重要 因素 。 目 前 常见 的 备份 结构 包 
括 : 


。 磁盘 -磁盘 的 数据 备份 (D2D) 。 

。 磁盘 -物理 磁带 库 的 数据 备份 (D21)。 

。 磁盘 -虚拟 磁带 库 的 数据 备份 (D2V). 

。 磁盘 -虚拟 磁带 库 -物理 磁带 的 数据 备份 (D2D21T)。 


磁盘 -磁盘 (Disk to Disk, D2D) 的 备份 是 使 用 磁盘 阵列 作为 主 存储 介质 和 备份 存储 介质 

的 一 种 解决 方案 ， 具 体 有 两 种 实现 方式 : 

。 用 户 为 备份 系统 部 署 一 套 磁 盘 阵 列 作为 备份 介质 ， 通 过 备份 软件 将 应 用 数据 备份 到 备 
份 服务 器 连接 的 磁盘 阵列 中 。 

。 用 户 为 备份 系统 部 署 磁盘 阵列 作为 备份 介质 ， 新 部 署 的 磁盘 阵列 与 现 有 的 在 线 存 储 磁 
盘 阵 列 为 同一 品牌 、 同 一 型 号 ， 通 过 此 类 磁盘 阵列 所 具备 的 LUN 拷 贝 、 快 照 或 远程 复 
制 功能 实现 将 现 有 磁盘 阵列 中 的 数据 复制 到 备份 磁盘 阵列 中 的 目的 。 
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单 见 的 备份 结 A 


。 D2T: 磁盘 -物理 磁带 库 的 数据 备份 


C SAN (FC/P/SAS) ~ (FC/IP/SAS) 


er, NT 7 


备份 数据 流 -一 - 


物理 磁带 库 
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磁盘 -物理 磁带 (Disk to Physical Tape Library, D2T) 的 备份 是 应 用 最 为 广泛 的 一 种 
备份 结构 ， 有 很 多 用 户 采 用 了 这 种 备份 结构 对 自身 的 应 用 数据 进行 备份 ; 然而 ， 在 实际 的 
使 用 中 ， 很 多 用 户 发 现 ， 物 理 磁带 库 的 故障 使 得 整个 备份 系统 的 运行 以 及 管理 面临 着 很 大 
的 风险 和 挑战 。 


通过 物理 磁带 库 与 备份 软件 结合 可 以 方便 的 规划 备份 策略 ， 然 而 ， 物 理 磁带 库 的 故障 
却 经 常 使 得 备份 策略 无 法 正确 完成 ， 甚 至 影响 到 整个 系统 的 备份 计划 ; IDG 数 据 统计 ， 用 
户 平 均 每 年 用 于 维护 物理 磁带 库 的 蓄 费 相当 于 部 署 该 物理 磁带 库 费 用 的 15 罗 ， 物 理 磁带 库 
是 由 很 多 的 精密 机 械 元 器 件 组 成 的 一 个 更 大 的 精密 仪器 系统 ， 任 何 小 的 零 部 件 磨 损 都 有 可 
能 造成 整个 物理 磁带 库 的 宕 机 ; 目前 来 看 ， 物 理 磁带 驱动 器 以 及 磁带 库 的 机 械 手 臂 是 物理 


磁带 库 故 障 的 最 大 原因 ， 一 旦 物理 磁带 库 出 现 故 障 ， 往 往 只 能 返回 原 厂 或 更 换 一 全 新 设备 ， 


这 个 时 间 往 往 要 持续 几 天 甚至 更 长 时 间 ， 在 这 个 过 程 中 ， 所 有 的 备份 作业 都 无 法 进行 ， 备 
份 策略 会 受到 很 大 的 影响 。 


物理 磁带 库 的 I/O 〇 浇 颈 问题 一 直 是 困扰 用 户 的 另 一 个 问题 ， 由 于 物理 磁带 的 读 写 是 顺 
序 进行 的 ， 无 法 像 物理 硬盘 一 样 进行 随机 读 写 ， 这 就 决定 了 一 个 物理 磁带 驱动 的 |/O 〇 性 能 
是 固定 的 如果 现 有 的 Il/O 〇 性 能 无 法 满足 要 求 ， 用 户 只 能 通过 增加 物理 磁带 驱动 器 的 方式 
来 提升 性 能 。 部 署 物理 磁带 驱动 器 的 成 本 相对 来 说 是 很 高 的 ， 并 且 ， 系 统 中 每 增加 一 个 物 
理 磁带 驱动 器 ， 整 个 备份 系统 的 稳定 性 就 会 增加 一 定 的 风险 。 


0 
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常见 的 备份 结构 


。 D2T: 磁盘 -物理 磁带 库 的 数据 备份 


ST SAN CPAS > (FC/IP/SAS) 


磁盘 阵列 4 | 


备份 数据 流 - -~ -“ 


物理 磁带 库 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. HUAWEI 





物理 磁带 库 的 物理 磁带 的 可 靠 性 会 随 着 磁带 使 用 次 数 的 增多 而 不 断 下 降 ， 在 使 用 物理 
磁带 库 作 为 备份 介质 的 用 户 中 ， 很 多 都 经 历 过 物理 磁带 损坏 或 无 法 读 取 而 导致 数据 无 法 恢 
复 的 事故 。 


物理 磁带 的 每 盘 容量 都 是 固定 的 。 用 户 在 创建 备份 策略 时 ， 往 往 是 确定 某 几 盘 磁 带 分 
别 进行 增 量 或 差别 备份 ， 而 另外 一 部 分 进行 全 备份 ， 这 就 出 现 了 用 于 进行 增 量 或 差别 备份 
的 磁 融 存储 容量 利用 率 非常 低 的 问题 ”在 一 定 程度 上 造成 了 用 户 投资 的 浪费 。 
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常见 的 备份 结构 D2V 


。 D2V: 磁盘 -虚拟 磁带 库 的 数据 备份 


> 


磁盘 阵列 ne. er 
虚拟 磁带 库 


备份 数据 流 - -一 - 
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在 D2V 的 备份 结构 中 ， 虚 拟 磁 带 库 是 采用 物理 硬盘 为 存储 介质 ， 通 过 虚拟 化 引擎 来 实 
现 机 械 手 臂 、 磁 带 驱动 器 以 及 磁带 插 模 的 全 新 备份 介质 解决 方案 。 由 于 没有 机 械 零 部 件 ， 
虚拟 磁带 库 的 可 靠 性 和 可 维护 性 比 起 物理 磁带 库 大 大 提高 ， 与 磁盘 阵列 的 物理 可 靠 性 、 可 
维护 性 相 一 致 。 虚 拟 磁 带 库 采用 了 物理 硬盘 作为 存储 介质 ， 物 理 硬 盘 的 随机 读 写 、 高 速 寻 
道 定位 在 性 能 上 远 远 高 于 物理 磁带 的 顺序 读 写 ; 因此 ， 虚 拟 磁 带 库 的 MO 性 能 取决 于 虚拟 
磁带 库 的 对 外 连接 带宽 ， 而 非 物 理 倍 带 库 的 磁带 驱动 器 类 型 及 数量 的 总 和 换算 结果 。 


虚拟 磁带 库 由 于 采用 了 虚拟 化 引擎 ， 在 与 之 连接 的 服务 器 端 看 到 的 仍然 是 个 物理 磁带 
库 ， 而 物理 磁带 库 在 操作 系统 中 只 有 通过 特定 的 备份 软件 才能 够 对 其 进行 读 写 操作 ， 因 此 
虚拟 磁带 库 虽 然 采 用 物理 硬盘 存储 数据 ， 但 却 避 免 了 采用 磁盘 阵列 作为 备份 介质 时 ， 数 据 
被 误 删 除 或 感染 病毒 等 问题 。 


应 用 虚拟 磁带 库 作为 备份 介质 既 保证 了 备份 系统 的 可 靠 性 又 不 增加 任何 投资 的 情况 下 
提高 了 备份 系统 的 备份 效率 ; 但 是 ， 用 户 还 要 考虑 一 些 问 题 ， 首 先 ， 虚 拟 磁带 库 所 保存 的 
数据 均 是 存在 物理 硬盘 上 的 ， 而 通常 情况 下 ， 这 些 物理 硬盘 都 是 通过 RAID 技 术 组 成 的 一 个 
大 的 逻辑 磁盘 、 如 果 用 户 需 要 将 一 部 份 重要 的 备份 数据 归档 保存 ， 这 对 于 虚拟 磁带 库 来 说 
是 个 不 小 的 挑战 ， 因 为 用 户 无 法 去 定位 虚拟 磁带 具体 存放 在 哪 块 物理 硬盘 中 在 这 物理 磁 
带 库 中 很 容易 实现 ， 只 需 将 茶 一 盘 对 应 的 磁带 从 物理 磁带 库 中 取出 即 可 ) ; 其 次 、 虚 拟 磁 
带 库 是 否 像 物 理 磁 融 库 一 样 具备 数据 压缩 功能 也 是 需要 考察 的 ; 再 次 、 虚 拟 磁带 库 是 否 能 
够 提供 按 需 存 储 的 功能 〈 即 ， 虚 拟 磁带 库 可 以 控制 某 些 用 于 增 量 或 差别 备份 的 虚拟 磁带 所 
吉 用 的 磁盘 空间 根据 实际 的 存储 数据 量 来 设 定 ) o 
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常见 的 备份 结构 


。 D2D2T: 磁盘 -虚拟 磁带 库 -物理 磁带 的 数据 备份 


TL SNE > 


在 线 存 储 系统 在 线 存储 系统 


RADAR - — — - 
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D2D2T 的 数据 备份 方式 相对 而 言 是 最 合适 的 备份 方式 ， 兼 顾 了 可 靠 性 、 可 
性 能 等 多 方面 的 因素 。 


虚拟 磁带 库 有 着 安全 、 可 靠 、 性 能 高 的 优点 ， 而 物理 磁带 库 相 对 来 说 有 着 支持 介质 可 
移动 的 功能 ;综合 分 析 来 看 ， 最 好 的 解决 方案 应 该 是 如 下 诸 方 面 的 整合 : 
。 采用 物理 磁盘 作为 一 级 备份 介质 和 "并 通过 RAID 功 能 进行 保护 ， 以 提高 性 能 和 可 靠 性 。 
。 采用 虚拟 化 磁带 库 技术 确保 主机 端 备份 系统 的 可 管理 性 和 安全 性 不 受到 挑战 。 
。 虚拟 磁带 库 系统 能 够 支持 按 需 存储 功能 ， 实 现存 储 资源 的 充分 利用 


。 虚拟 磁带 库 系 统 能 够 支持 将 虚拟 磁带 导出 到 物理 磁带 的 功能 ， 方 便 备份 数据 的 归档 保存 
异地 保存 。 


管理 性 以 及 
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重复 数据 删除 技术 


che (CID) 
MS 





Original Data Duplicates Removed 
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重复 数据 删除 (Deduplication) 技术 ， 简 单 来 说 ， 就 是 一 种 消除 重复 数据 的 技术 ， 
它 用 软件 或 硬件 的 方式 ， 对 存储 数据 进行 处 理 、 以 消除 其 中 的 重复 数据 ， 从 而 减 小 数据 占 
用 的 存储 空间 。 


。 重复 数据 删除 的 实现 过 程 : 
o 原始 数据 存储 在 介质 上 。 
o 重 删 时 以 一 定 的 数据 块 大 小 为 单位 进行 比 对 。 


o 唯一 的 数据 存放 在 重 删 后 的 空间 里 ， 后 面 的 数据 跟 唯一 数据 进行 比 对 ， 重 复 的 数 
据 则 被 删除 ,y 同 时 在 指定 的 空间 存放 Index 和 Metadoata。 


o 没有 重复 的 数据 则 将 这 部 分 作为 唯一 数据 保留 在 重 删 后 的 空间 中 ， 同 时 写 入 
ndexfiMetadata. 


。 对 备份 的 价值 : 
o 能 更 有 效 的 节省 存储 的 空间 ， 大 大 提高 存储 的 利用 率 ， 降 低 用 户 的 TCO。 
5 减 小 备份 窗口 。 
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重复 数据 删除 与 压缩 区 别 





功能 实现 


切 块 比 对 ， 
保留 唯一 
数据 





压缩 算法 
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可 以 把 重复 数据 删除 看 作 一 种 特殊 的 压缩 。 重 复数 据 删除 对 数据 进行 一 些 算法 的 处 理 ， 
把 数据 切割 成 块 ， 比 如 说 4K， 或 者 是 1W6K ,N32K， 然 后 进行 比 对 ， 比 对 完了 以 后 只 有 变 
化 过 的 ， 唯 一 的 数据 块 才 存 到 真正 的 磁盘 空间 上 去 ， 这 是 基本 的 原理 。 重 复数 据 删 除 
主要 用 于 备份 ， 进 行 重 复数 据 删除 ， 需 要 有 一 个 基本 的 比较 数据 块 。 

压缩 一 般 是 通过 压缩 算法 ， 减 洗 文 件 的 大 小 ， 删 除 文件 的 重复 数据 也 许 是 文件 压缩 的 
一 种 方法 ， 但 压缩 文件 应 该 砂 仪 仪 限 于 此 。 


重复 数据 删除 分 类 、 


。 重 删 技术 可 以 按照 重 删 的 位 置 、 时 刻 、 粒 度 、 范 围 等 多 个 维度 进行 
分 类 。 


重复 数据 删除 








后 处 理 重 删 


文件 级 重 删 
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。 源 端 重 删 

先 删除 重复 数据 ， 再 将 数据 传 到 备份 设备 。 
。 目标 端 重 删 

先 将 数据 传 到 备份 设备 ， 存 储 时 再 删除 重复 数据 。 
。 在 线 重 删 (Inline) 

数据 写 入 磁盘 之 前 进行 重复 数据 删除 。 
。 后 处 理 重 删 (Post-processing) 

数据 写 入 磁盘 后 开始 进行 重复 数据 删除 。 
e。 适应 性 重 删 (Adaptative Data Deduplication) 

性 能 要 求 较 低 的 环境 下 采用 在 线 重 删 ， 性 能 要 求 较 高 的 时 候 采 用 后 处 理 重 删 。 
。 文件 级 重 删 


也 称 为 单 实例 存储 (S15)， 根 据 索引 检查 需要 存储 文件 的 属性 ， 并 与 已 存储 文件 进行 比较 
。 如 果 没 有 相同 文件 ， 就 将 其 存储 ， 并 更 新 索引 ; 否则 仅 存 入 指向 已 存在 文件 的 指针 。 
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重复 数据 删除 分 类 


。 重 删 技术 可 以 按照 重 删 的 位 置 、 时 刻 、 粒 度 、 范 围 等 多 个 维度 进行 分 类 。 
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。 块 级 重 删 


将 文件 /对 象 分 解 成 固定 长 度 或 不 定 长 度 的 数据 块 ， 对 数据 块 进行 哈 希 计 算 ， 并 与 已 存 
块 的 哈 希 值 进行 比较 ， 只 存储 唯一 哈 希 的 数据 块 。 


。 字 节 级 重 删 

从 字 节 层次 查找 和 删除 重复 的 内 容 、 一般 是 通过 压缩 算法 对 用 户 数据 进行 压缩 存储 。 
。 本 地 重 删 

查找 重复 数据 时 ， 仅 和 当前 存储 设备 内 的 数据 进行 比较 
。 全 局 重 删 

查找 重复 数据 时 ,、 和 整个 重 删 域 中 的 所 有 存储 设备 的 数据 进行 比较 。 


重复 数据 删除 关键 指标 A 


用 户 的 问题 重复 数据 删除 关键 指标 


Hs mx 


ETATS ME Q 


重 删 后 数据 是 否 可 靠 ， 是 
否 随时 可 恢复 ? 


容 灾 场 景 下 ， 需 要 多 长 时 D" 
间 才 DR-Ready? ~ ARE 


一 旦 生产 数据 丢失 ， 恢 复 a 
需要 多 长 时 间 ? SS ”恢复 性 能 
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备份 策略 的 内 容 


W Huawei 


备份 数据 : 即 我 们 需要 保护 的 数据 。 

备份 目的 地 : 即将 保护 的 数据 存放 到 指定 的 设备 上 ， 可 以 理解 为 备份 介质 。 
备份 类 型 : 采用 哪 一 种 方式 进行 备份 A 分 成 全 备份 、 增 量 备份 、 差 异 备份 。 
数据 保留 时 间 : 存放 在 介质 上 的 备份 数据 需要 保留 的 时 间 ， 即 备份 数据 有 效 时 间 。 
备份 周期 : 备份 作业 的 频率 美 可 以 是 每 天 、 每 周 、 每 月 等 。 

备份 窗口 : 一 次 备份 从 开始 到 备份 结束 的 时 间 段 ， 称 为 备份 窗口 。 

备份 策略 的 选择 : 





o 对 于 操作 系统 和 应 用 软件 ， 在 每 一 次 系统 更 新 或 者 安装 了 新 的 软件 后 做 一 次 全 备 


份 。 


o 对 于 关键 的 应 用 数据 ， 涉 及 每 天 大 量 的 数据 更 新 ， 但 是 总 数据 量 不 是 很 大 ， 我 们 


本 以 用 户 在 使 用 少量 数据 的 时 候 每 天 做 一 个 全 备份 。 


oA 对 于 关键 应 用 ， 且 相对 数据 的 总 量 每 天 只 有 少量 的 数据 更 新 ， 我 们 可 以 在 每 月 或 


每 周 做 一 个 全 备份 ， 在 此 基础 上 可 以 在 一 系列 短 一 点 的 间隔 上 做 增 量 备份 。 
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Ar; 3 l 
备份 策略 -数据 类 型 
。 备份 数据 类 型 : 文件 、 数 据 库 、05、 应 用 软件 .… 
文件 /文件 夹 备 份 Word/excel/ppt/photo... 
数据 库 备 份 Oracle/db2/informix/sybase 
逻辑 卷 备份 Oracle 逻 辑 卷 /MYSQL 逻辑 卷 


操作 系统 备份 Windows/redhat/suse--- 


备份 软件 自身 的 备份 Backup Exec/NetBacku as 
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备份 介质 ` 


。 当前 在 备份 中 常用 的 介质 为 磁盘 阵列 ,磁带 库 ， 虚 拟 磁带 库 ， 光 盘 库 。 
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。 磁盘 阵列 做 为 备份 介质 


o 优点 : 性 能 高 ， 读 写 速度 快 。 维 护 简 单 ” 可 维护 性 较 低 。 设 备 元 余 较 好 〈 包 括 电 
源 、 RE. 磁盘 阵列 控制 器 均 可 宛 余 ) o 磁盘 介质 爱 外 界 环境 (温度 、 湿度 、 粉 
LE) 影响 相对 较 小 。 磁 盘 阵列 可 采用 RAID 保 护 。 


o 缺点 : 一 次 性 投入 成 本 较 高 S 存储 效率 有 待 提高。 磁盘 备份 无 法 防止 人 为 错误 操 
作 。 


。 物理 磁带 库 
o 优点 : 基于 磁带 的 存储 系统 ; 由 多 个 驱动 器 、 权 、 机 械 手 辟 和 磁带 构成 ;单位 存 
储 成 本 低 ; 可 实现 数据 和 读 写 装置 分 离 ， 理 论 上 存储 容量 无 限 大 。 
口 缺点 : 
纯 机 械 装 置 人 .硬件 机 械 故 障 率 较 高 ; 磁带 介质 本 身 较 脆弱 ， 容 易 受 到 外 界 环境 
(温度 、 湿 度 、 粉 尘 等 ) 影响 而 失效 ; 管理 、 维 护 成 本 较 高 ; 设备 元 余 性 较 差 
(通常 只 有 大 型 磁带 库 有 电源 元 余 ) ; 备份 /恢复 时 间 较 长 ; 只 能 顺序 读 写 ， 不 
能 随机 读 写 ; 
e VTD Virtual Tape library 虚 拟 磁 带 库 
a 优点 : 管理 方便 ; 性 能 较 高 ; 无 需 更 改 原 有 磁带 存储 系统 架构 ; 存储 性 能 较 高 ， 
可 采取 压缩 、 重 复数 据 删 除 等 技术 。 
o 缺点 : 存储 介质 为 磁盘 导致 单位 存储 成 本 较 高 ; 整体 部 署 成 本 较 高 ; 容量 扩展 
性 能 较真 实 磁带 库 差 。 
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备份 介质 


。 当前 在 备份 中 常用 的 介质 为 磁盘 阵列 ,磁带 库 ， 虚 拟 磁带 库 ， 光 盘 库 。 


磁盘 阵列 
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。 光盘 库 / 光 盘 塔 


o 优点 : 光驱 、 光 盘 的 价格 较 低 ， 具 备 成 本 优势 ; 光盘 介质 保存 时 间 长 ; 对 保存 环 
境 要 求 较 低 。 

o 缺点: 读 / 写 速度 慢 ; 光驱 数量 有 限 ， 数 据 源 少 ， 所 支持 的 用 户 数量 也 较 少 ; 通 
常 不 可 反复 擦 写 。 


备份 策略 -备份 类 型 \ 


完全 备份 å 。””” 差 量 备 份 。 。”” 增 量 备份 


。 每 天 全 备份 。 每 周一 天 全 备份 
。 易 于 管理 。 本 周 其 余 每 天 备份 和 
全 备份 的 差异 部 分 
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完全 备份 : 
o RA: 能 够 基于 上 一 次 的 全 备份 快速 恢复 数据 ， 恢 复 窗 口 小 。 
o 缺点 : 所 占用 的 存储 空间 大 ， 每 次 备份 耗 时 长 ， 备 份 窗口 大 。 
差 量 备份 : 
o RA: 相对 全 备份 来 说 每 次 备份 可 以 节约 一 个 全 备份 的 存储 空间 ， 备 份 窗口 较 小 ， 
恢复 窗口 较 小 。 
o 缺点 : 恢复 时 必须 依赖 上 一 次 全 备份 和 本 次 的 差 量 备份 才能 完整 恢复 数据 。 
增 量 备份 : 
o 优点 : 能 够 最 大 限度 地 节省 存储 空间 ， 备 份 窗口 小 。 


o 缺点 : 数据 恢复 时 必须 依赖 上 一 次 完全 备份 和 每 一 次 的 增 量 备份 才能 对 数据 进行 
完整 恢复 ， 恢 复 时 数据 重 构 较 慢 ， 恢 复 窗口 较 大 。 
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备份 策略 -保留 周期 


。 保留 周期 Retention 即 在 
介质 上 存放 的 备份 数据 的 Dispose ab Create 


有 效 期 ， 在 保留 周期 内 的 
数据 是 不 允许 被 覆盖 ， 当 A > 
数据 存放 时 间 超 过 保留 周 ~ 


期 后 ， 该 部 分 数据 所 使 用 Archive 数据 生命 周期 Protect 
的 介质 空间 可 以 被 覆盖 ， 
AR FE. o S 4 


Migrate 人 Access 
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系统 管理 员 可 以 指定 每 次 备份 可 以 保留 多 长 时 间 ， 当 该 期 限 到 达 时 ， 备 份 软件 自动 将 
该 备份 的 相关 信息 从 备份 软件 数据 库 中 删除 《人 半 不 从 磁带 、 磁 盘 中 删除 ) ， 这 时 用 户 就 检 
索 不 到 这 次 备份 的 信息 。 


数据 被 “创建 ”生成 后 ， 重 要 的 数据 需要 “保护 ”起 来 ， 且 重要 的 数据 需要 经 常 的 
“访问 ”， 当 此 部 分 数据 的 重要 性 降低 后 ， 需 要 将 这 部 分 数据 “迁移 到 一 些 大 容量 、 性 
能 较 低 的 存储 设备 上 ， 随 着 时 间 的 推移 ， 当 该 部 分 数据 的 重要 性 再 次 降低 ， 此 时 需要 将 这 
部 分 数据 “归档 ”， 在 一 定 的 期 限 (保留 周期 ) 后 ， 这 部 分 数据 可 以 被 “去 除 ”， 即 使 备 
份 集 失效 。 

备注 : 备份 集 (Backup sets) 顾名思义 就 是 一 次 备份 的 集合 ， 它 包含 本 次 备份 的 所 
有 备份 片 。 一 个 备份 集 根据 备份 的 类 型 不 同 ， 可 能 构成 一 个 完全 备份 或 增 量 备份 。 


备份 策略 -备份 窗口 \ 


。 备份 窗口 (Backup window ) 是 指 在 不 严重 影响 使 用 需要 备份 的 
数据 的 应 用 程序 情况 下 ， 进 行 数据 备份 的 时 间 间 隔 ， 也 就 是 完成 一 
次 给 定 备份 所 需 的 时 间 。 


xX 

















S A ES ES ES ES 
N A oP 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reservéd. w HUAWEI 





业务 连续 性 (BC) 要 求 越 高 ， 备 份 窗口 与 之 矛盾 也 就 越 突出 ， 备 份 系统 需要 在 业务 连 
续 性 和 备份 窗口 之 间作 出 相应 的 平衡 。 

图 示 的 网 络 利用 率 表 示 : 在 8:00 一 20:00 网 络 利 用 率 是 最 大 的 时 候 ， 此 时 间 段 不 适合 
做 备份 窗口 ， 因 为 此 时 备份 会 对 用 户 的 业务 运行 造成 影响 ， 所 以 在 选择 和 设置 备份 窗口 时 ， 
需要 设置 在 网 络 利用 率 不 高 的 时 间 段 。 
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QAF 


备份 概念 及 拓扑 结构 
备份 技术 

.备份 策略 制定 

. 华为 备份 实现 与 应 用 


. FRET 
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VTL6900 产 品 族 i 


专用 磁盘 备份 系统 VTL6900 


x 


: 一 体 机 : 单 引 擎 + 阵列 : 引擎 集群 + 阵列 
: 2.34TB/hr 性 能 : 9TB/hr 性 能 31TB/hr 

: 48TB =: 864TB $=: 1728TB 

， 方 便 快捷 ， 效 能 兼备 ， 稳 定 可 靠 
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VTL 集 中 备份 方案 


小 规模 数据 集中 备份 (20-50TB, 性 
能 : 2.34TB/hr) 
一 体 化 设备 ,成 本 低廉 ， 快 速 部 署 





Backup 中 型 规模 数据 集中 备 偷 (5 篇 500TB， 
EEEE 性 能 : 9TB/hr) 
HAT), MMM, HS 
护 简 便 
Inline/post 
processingÆ 大 规模 数据 备份 [500TB+ ， 性 能 : 
3(08/h\ 
AA ER, SMR/HRR ST, 
统一 集中 管理 


W Huawei 





o 容量 : 20TB ~160TB 

o 保存 : 1~6 个 月 

o 性 能 : 400MB/s~1250MB/s 
o 预算 : 比较 有 限 


o 420 


VTL 备 份 归档 一 体 化 方案 


o 大 量 历史 数据 需要 长 期 保存 (保存 : 6 
个 月 +) 

o 物理 磁带 库 备份 性 能 低下 

o 备份 管理 维护 繁琐 

o 预算 有 限 ， 设 备 利 旧 ， 保 护 已 有 投资 

。 客户 价值 

o 缩短 备份 窗口 ，VTL6900 作 为 高 性 能 归 
档 缓存 
设备 利 旧 ， 已 有 物理 带 库 作为 大 容量 归 BE 
档 存储 


简化 管理 ，VTL6900 自 动 将 备份 数据 归 VTLÉSOÙ 
档 至 磁带 库 
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分 级 备份 
o 利用 已 有 物理 带 库 
o 原 备份 性 能 不 高 <200MB/s 
o 备份 数据 长 期 保存 -- 超 过 12 个 月 
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HDP3500E 简介 


。 设备 简介 
a HDP3500E 是 一 款 集 备 份 软件 、 备 份 服务 器 和 备份 介质 于 一 体 的 
高 性 能 备份 产品 。 
o 集成 NetBackup 备份 软件 ， 能 够 为 企业 关键 业务 提供 全 面 的 数据 
保护 。 
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2U，12 盘 位 。 可 提供 18TB 备 份 可 用 容量 ， 以 及 4 个 干 兆 备份 业务 网 口 。 


通过 备份 设备 的 横向 扩展 ， 用 户 可 组 建 基于 HDP3500E 的 备份 域 ， 实 现 备 份 容量 和 备 
份 性 能 的 线性 增长 。 
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HDP3500E + 带 库 组 网 方案 


HDP3500E 
Master Serve 


HDP3500E 


FC Switch Media serre 


a HDP3500E 
E Media Server N 
Disk Array 


: . 二 一 一 一 备份 数据 流 
Physic Tape Library 


LAN 
SAN 
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该 方案 由 多 人 台 HDP3500E 组 成 一 个 备份 域 ，1 台 Master Server, & BMedia Servere 


备份 数据 传输 采用 LAN-Based 的 方式 ， 通 过 LAN 网 络 承载 。 备 份 数据 首先 存储 在 
HDP3500E 的 本 地 硬盘 存储 上 ， 再 根据 用 彤 需求 ， 定 期 迁移 到 物理 带 库 上 ， 实 现 备份 数 据 的 
分 级 存储 ， 提 高 存储 利用 率 、 降 低 整体 成 本 。 

当 业 务 增 长 后 ， 可 以 通过 增加 HDPR3500E 设 备 ， 实 现 扩 展 备份 性 能 、 备 份 数 据 存 储 空间 
平滑 扩展 。 通 过 增加 HDP3500E， 实 现 备份 系统 计算 性 能 、 存 储 空间 的 平滑 扩展 。 可 外 接 物 
理 带 库 ， 实 现 备份 数据 分 级 存储 4 提高 存储 利用 率 。 外 接 带 库 时 ， 支 持 Vault 功 能 ， 满 足 
磁带 离线 管理 需求 。 


o0 480 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. A HUAWEI 





0 496 0 





HUAWEI ENTERPRISE ICT SOLITIONS A BETTER WAY 


数据 集中 
政务 信息 化 建设 高 速 发 展 
政府 行业 逐渐 建立 大 型 数据 中 心 ， 数 据 的 集中 也 意 





味 着 风险 的 加 剧 + + 

提高 数据 的 抗 风险 能 力 ， 已 成 为 急需 解决 的 问题 N 
业务 中 断 ， 数 据 丢 失 ， 影 响 巨 大 È 

关键 业务 中 断 对 政务 信息 化 影响 巨大 

数据 丢失 在 社保 、 财 政 、 政 务 、 高 法 等 系 


不 可 弥补 的 损失 。 - = 


a dE ,i 
的 意见 》 


z PNR. OLA 
”国家 标准 《信息 系 规范 》 
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à 


应 用 级 容 灾 LO 
小 





数据 级 容 灾 
AN- 
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数据 级 容 灾 是 指 通过 建立 异地 容 灾 中 心 ， 做 数据 的 远程 备份 ， 在 灾难 发 生 之 后 要 确保 
原 有 的 数据 不 会 丢失 或 者 遭 到 破坏 ， 但 在 数据 级 容 灾 这 个 级 别 ， 发 生 灾难 时 应 用 是 会 中 断 
的 。 在 数据 级 容 灾 方 式 下 ， 所 建立 的 异地 容 灾 中 心 可 以 简单 地 把 它 理 解 成 一 个 远程 的 数据 
备份 中 心 。 数 据 级 容 灾 的 恢复 时 间 比 较 长 ， 但 是 相 比 其 他 容 灾 级 别 来 讲 它 的 费用 比较 低 ， 
而 且 构建 实施 也 相对 简单 。 


应 用 级 容 灾 是 在 数据 级 容 灾 的 基础 之 上 ， 在 备份 站 点 同样 构建 一 套 相同 的 应 用 系统 ， 
通过 同步 或 异步 复制 技术 ， 这 样 可 以 保证 关键 应 用 在 允许 的 时 间 范 围 内 恢复 运行 ， 尽 可 能 
减少 灾难 带 来 的 损失 ， 让 用 户 基本 感受 不 到 灾难 的 发 生 ， 这 样 就 使 系统 所 提供 的 服务 是 完 
整 的 、 可 靠 的 和 安全 的 。 应 用 级 容 灾 生产 中 心 和 异地 灾 备 中 心 之 间 的 数据 传输 是 采用 异类 
的 广域网 传输 方式 ; “同时 应 用 级 容 灾 系统 需要 通过 更 多 的 软件 来 实现 ， 可 以 使 多 种 应 用 在 
灾难 发 生 时 可 以 进行 快速 切换 ， 确 保 业 务 的 连续 性 。 

业务 级 容 灾 是 全 业务 的 灾 备 ， 除 了 必要 的 IT 相关 技术 ， 还 要 求 具备 全 部 的 基础 设施 。 
其 大 部 分 内 容 是 非 上 IT 系统 〈 如 电话 、 办 公 地 点 等 ) ， 当 大 灾难 发 生 后 ， 原 有 的 办 公 场 所 都 
会 受到 破坏 ,除了 数据 和 应 用 的 恢复 ， 更 需要 一 个 备份 的 工作 场所 能 够 正常 的 开展 业务 。 
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容 灾 系统 衡量 指标 


RPO 〇 恢复 点 目标 RTO 恢 复 时 间 目 标 


e RPO, Recovery Point e RTO, Recovery Time 


Objective; 
。 灾难 发 生 后 ， 系 统 和 数 
据 必须 恢复 到 的 时 间 点 要 
求 ; 
。 值 越 小 表明 丢失 的 数据 
越 少 。 


Objective; 
。 灾难 发 生 后 ， 信 息 系统 或 Ç 
业务 功能 从 停顿 到 必须 恢 

复 的 时 间 要 求 ; 

。 值 越 小 表明 业务 中 断 时 间 


RPO A 
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。 RPO 用 来 衡量 容 灾 系统 的 业务 恢复 能 力 。 
。 RTO 用 来 衡量 容 灾 系统 的 数据 见 余 备份 能 力 。 


0 499 0 


灾 备 系统 建设 的 国际 标准 


。 根据 SHARE 78 国 际 组 织 提 出 的 标准 ， 可 以 将 系统 容 灾 的 级 别 划分 为 如 下 7 级 。 


费 远程 灾 备 中 心 
用 


Tier 7 - 接近 0 或 0 数据 丢失 ， 远 程 数据 镜像 ， 且 业务 环境 可 高 自动 化 系统 接管 


ier 6 -- 接近 0 或 0 数据 丢失 ， 远 程 数据 镜像 保 
Tier 5 -软件 级 ， 两 地 间 两 阶段 提交 (交易 完整 性 ) 


可 用 的 备份 中 心 Tier 4 - 批量/ 在线 数据 库 镜 像 或 日 志 传输 


15Min 1-4Hr 4-8Hr 8-12Hr 12~16hr 24Hr @Days Weeks RTO 
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PTAM (Pickup Truck Access Method) 卡车 运送 访问 方式 
1 层 : 有 数据 备份 ， 无 备用 系统 (Data Backup with No Hot Site) 
2 层 : 有 数据 备份 ， 有 备用 系统 (Data Backup with Hot Site) 
3 层 : 电子 链接 (Electronic Vaulting) 
使 用 3 层 容 灾 解 决 方案 的 业务 ， 是 在 2 层 解决 方案 的 基础 上 ， 又 使 用 了 对 关键 数据 的 
电子 链接 技术 。 
4) 应 用 程序 层 : 应 用 程序 开发 时 考虑 到 数据 的 复制 。 RTO 小 时 级 ， 快 照 等 


在 4 层 方案 中 开始 使 用 基于 磁盘 的 解决 方案 。 此 时 仍然 会 出 现 几 个 小 时 的 数据 丢失 ， 但 
同 基于 磁带 的 解决 方案 相 比 ， 通 过 加 快 备份 频率 ， 使 用 最 近 时 间 点 的 快照 拷贝 恢复 数据 会 
更 快 。 系统 可 在 二 天 内 恢复 。 

5) 层 : 交易 的 完整 性 (Transaction Integrity) 


5 层 除 了 使 用 4 层 的 技术 外 ， 还 要 维护 数据 的 状态 - 要 保证 在 本 地 和 远 端 数据 库 中 都 要 更 
新 数据 。 只 有 当 两 地 的 数据 都 更 新 完成 后 ， 才 认为 此 次 交易 成 功 。 生产 中 心 和 备用 中 心 
是 由 高 速 的 宽带 连接 的 ， 关 键 数 据 和 应 用 同时 运行 在 两 个 地 点 。 


6) 层 冷 少量 或 无 数据 丢失 (Zero or little data loss) 


6 层 灾难 恢复 方案 可 以 保证 最 高 一 级 数据 的 实时 性 。 适用 于 那些 几乎 不 允许 数据 丢失 
并 要 求 能 快速 将 数据 恢复 到 应 用 中 的 业务 。 此 种 解决 方案 提供 数据 的 一 致 性 ， 不 依赖 于 
应 用 而 是 靠 大 量 的 硬件 技术 和 操作 系统 软件 来 实现 的 。 


灾 备 系统 建设 的 国际 标准 | 
。 根据 SHARE 78 国 际 组 织 提出 的 标准 ， 可 以 将 系统 容 灾 的 级 别 划分 为 如 下 7 级 。 


费 远程 灾 备 中 心 
用 


Tier 7 -接近 0 或 0 数据 丢失 ， 远 程 数据 镜像 ， 且 业务 环境 可 高 自动 化 系统 接管 


27 Tare 


ier 6 — ORORO ZX, MIERE EE R RUER TE 
Tier 5- HHR, PRIMES (交易 完整 性 ) 


可 用 的 备份 中 心 Tier 4 - 批量 /在 线 数据 库 镜 像 或 日 志 传输 


15Min 1-4Hr 4-8Hr 8-12Hr 12~16hr 24Hr @Days Weeks RTO 
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7) B: 解决 方案 与 具体 业务 相 结 合 ,。 实现 自主 管理 (Highly Automated , Business 
Integrated Solution) 无 需 人 工 介 入 的 自动 站 点 故障 切换 功能 

7 层 灾 难 恢复 方案 在 第 6 层 的 基础 上 六 集成 了 自主 管理 的 功能 。 在 保证 数据 一 致 性 的 同 
时 ， 又 增加 了 应 用 的 自动 恢复 能 力 ， 人 使 得 系统 和 应 用 恢复 的 速度 更 快 、 更 可 靠 (按照 灾难 
恢复 流程 ， 手 工 操作 也 可 实现 整个 恢复 过 程 ) 。 


0 5010 


0 520 


容 灾 系 统 的 总 体 设 计 


灾 备 系统 建设 三 要 素 


流程 : 保障 容 灾 系统 正常 运行 工作 流程 ， 
包括 ， 切 换 流 程 、 回 切 流程 、 测 试 流程 和 
\ 演 习 流 程 等 。 








ps 
技术 : 容 灾 系 统 建设 涉及 到 的 技术 ， 
包括 数据 复制 技术 、 应 用 切换 和 网 
\ 络 切换 技术 等 。 


人 员 : 在 容 灾 系 统 建设 分 
设计 、 实 施 和 维护 等 
中 涉及 的 人 员 及 组 组 。 











析 、 
过 和 
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流程 、 技 术 、 人 员 是 容 灾 系 统 建设 的 三 个 要 素 光 贯穿 


容 灾 系 统 建设 分 为 四 个 阶段 : 
一 阶段 市 场 评估 /需求 分 析 


容 灾 系 统 建设 四 步 走 
需求 分 析 : 容 灾 系统 实施 前 ,对 客 | 
户 情况 进行 全 面 分 析 ， 包 括 业务 影 ` 
响 分 析 和 风险 分 析 。 
策略 制定 : HEDERA 
况 的 容 灾 方 案 和 策 星 。 
| 方案 实施 : RME | 
RRIARI. 

















Al SS 
RARE RAGE 
后 的 上 党 维护 ， 包 括 演 练 
NE LE 





W Huawei 





容 灾 系 统 建设 的 全 过 程 。 


容 灾 系统 建设 流程 


需求 分 析 阶 段 


m 


为 客户 提供 多 
种 咨询 服务 : 


业务 关键 性 评 
估 

系统 风险 评估 
成 本 效益 评估 
容 灾 能 力 评估 


了 解 客 户 容 灾 系 统 

的 评审 点 ， 确 定 容 

灾 技 术 方 案 

。 备份 /恢复 的 范围 

。 灾难 恢复 计划 

。 生产 / 灾 备 中 心间 距 
离 

。 组 网 情况 
RTO/RPO 要 求 


制定 策略 阶段 


根据 项 目 需求 分 析 报 
告 确定 容 灾 策略 


确定 灾难 恢复 层次 
确定 站 点 类 型 
容 灾 中 心地 点 选择 
确定 实施 策略 


方案 实施 阶段 


根据 项 目 实施 策略 
完成 项 目 实施 


。 制定 实施 计划 
首次 演练 
文档 / 培 计 
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华为 公司 在 容 灾 系 统 建设 中 实现 全 流程 管理 ， 


服务 ， 在 项 目 投入 运营 以 后 ， 继 续 提供 技术 支持 服务 。 
已 有 方案 优化 、 扩 容 升级 \ 新 增 业务 


: 硬件 设备 、 资 源 监控 、 用 户 管理 
: 变更 演练 、 定 期 演练 、 应 急 演练 
: 灾难 监控 六 灾难 恢复 、 容 灾 切 换 


建立 运 维 保障 体系 ， 


确保 容 灾 系统 正常 
运行 

方案 变更 管理 支持 
日 常 维护 管理 支持 
容 灾 演练 管理 支持 
灾难 恢复 管理 支持 


W Huawei 





在 项 目 需求 分 析 阶 段 ， 可 提供 项 目 咨 询 


0 5030 


灾难 恢复 流程 \ 


th - 4 
Jp Ep Ep Ep 


lh Ea wah a 


f 
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BCP: Business Continuity Plan; ”中 文 : .业务 持续 性 计划 BCP 是 组 织 为 避免 关键 业务 功能 
中 断 ， 减 少 业 务 风 险 而 建立 的 一 个 控制 过 程 , 它 包 括 对 支持 关键 功能 的 人 力 、 物 力 和 关键 
功能 所 需 的 最 小 级 别 服务 水 平 的 连续 性 保证 % 

DRP 灾 难 恢复 计划 (Disaster Recovery Planning) ”灾难 恢复 计划 是 一 个 全 面 的 状态 ， 它 
包括 在 事前 ， 事 中 ， 和 灾难 对 信息 系统 资源 造成 重大 损失 后 所 采取 的 行动 。 灾 难 恢复 计划 
是 对 于 紧急 事件 的 应 对 过 程 。 在 中 断 的 情况 下 提供 后 备 的 操作 ， 在 事后 处 理 恢复 和 抢救 工 
作 


型 容 灾 解决 方案 一 一 两 地 三 中 心 \ 


同城 灾 备 站 点 


< 


eg 同步 远程 镜像 
gares) 


sp Block replication flow 


全 | Diskguard/Host Agent 


w 
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。 业务 可 靠 性 要 求 非常 高 ， 主 站 点 故障 后 业务 下 以 自动 切换 到 同城 灾 备 站 点 。 同 时 ， 数 所 

可 以 在 异地 保存 ， 进 行 数 据 级 恢复 。 通 过 磁盘 阵列 的 级 联 复制 功能 ， 将 数据 复制 到 同城 的 

容 灾 站 点 和 P 同城 站 点 采用 同步 复制 ， 保 证 数据 的 实时 同步 。 异 地 站 点 采 
异步 复制 ， 进 行 数据 级 容 灾 。 


o0 5050 


O 总 结 


备份 概念 及 拓扑 结构 
备份 技术 

备份 策略 制定 
华为 备份 实现 与 应 用 
容 灾 简 介 
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思考 题 


1. 备份 的 拓扑 结构 有 哪些 ， 优 缺点 分 别 是 什么 ? 
2. 重复 删除 技术 的 分 类 ? 
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练习 题 


。 多 选 题 


1 、 常 用 的 备份 介质 有 ( 
À. 磁带 库 
B. 磁盘 阵列 
C. 虚拟 磁带 库 
D. 


光盘 塔 /光盘 库 
2 、 重 删 技术 可 以 按照 重 删 的 粒度 可 分 为 〈 
文件 级 重 删 
块 级 重 删 
， 字 节 级 重 删 
源 端 重 删 





Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. A HUAWEI 


从 
Ko 本 
全 


Thank you 
www.huawei.com 





W 
4 


2., 


HC1109110 云 计 算 基 础 《 





NG 


HUAWEI 


W 
4 


2., 


HC1109110 
云 计 算 基础 
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© ER 


。 学 完 本 课程 后 ， 您 将 能 
o 了 解 云 计 算 的 概念 与 背景 
o 掌握 云 计算 的 部 署 与 商业 模式 
o 了 解 云 计 算 的 核心 技术 与 价值 
o 掌握 华为 云 计 算 解决 方案 
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. 云 计 算 的 概念 与 产生 背景 


HD SIL Er 47 hp 
为 云 计 算 解 决 方案 
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云 计算 的 概念 


云 计算 是 一 种 通过 Internet 以 服务 的 方式 提供 动态 可 伸缩 的 虚拟 化 资 
源 的 计算 模式 。(Cloud computing is a style of computing in which 
dynamically scalable and often virtualized resources are provided.as a 


service over the Internet. ) 


— WREX 
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云 计 算 (cloud computing) 是 基于 互联 网 的 相关 服务 的 增加 、 使 用 和 交付 模式 ， 通 常 
涉及 通过 互联 网 来 提供 动态 易 扩 展 且 经 常 是 虚拟 化 的 资源 。 云 是 网 络 、 互 联网 的 一 种 比喻 说 
法 。 过 去 在 图 中 往往 用 云 来 表示 电信 和 网 % 后 来 也 用 来 表示 互联 网 和 底层 基础 设施 的 抽象 。 狭 
义 云 计算 指 IT 基础 设施 的 交付 和 使 用 模式 ， 指 通过 网 络 以 按 需 、 易 扩展 的 方式 获得 所 需 资源 ; 
广义 云 计 算 指 服务 的 交付 和 使 用 模式 有 * 指 通过 网 络 以 按 需 、 易 扩展 的 方式 获得 所 需 服务 。 这 
种 服务 可 以 是 [和 软件 、 互联 网 相关 ,也 可 是 其 他 服务 。 它 意味 着 计算 能 力也 可 作为 一 种 商品 

通过 互联 网 进行 流通 


云 计算 的 资源 是 动态 易 扩展 而 且 虚 拟 化 的 ， 通 过 互联 网 提供 。 终 端 用 户 不 需要 了 解 
“ 云 ” 中 基础 设施 的 细 苑 ， 不 必 具 有 相应 的 专业 知识 ， 也 无 需 直 接 进 HE, 只 关注 自己 真 
正 需要 什么 样 的 资源 以 及 如 何 通过 网 络 来 得 到 相应 的 服务 。 


516 [] 


商业 视角 : 云 计 算 = 信息 电厂 
PC 时 代 Internet 时 代 


企业 数据 中 心 9 计算 和 存储 : 
从 局 域 网 向 互联 网 迁移 


。 用 户 消费 模式 变化 

o 通过 互联 网 提供 软 硬 件 与 服务 ; 用 户 由 浏览 器 或 轻 量 级 终端 获取 、 使 用 服务 
。 商业 模式 发 生变 化 

o 从 “购买 软 硬 件 产品 ” 向 “购买 信息 服务 ”转变 疙 如 同 T00 年 前 用 电 的 转变 
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IT 即 服务 ， 云 计算 就 是 建设 信息 电厂 提供 IT 服务 。 


云 计算 是 通过 互联 网 提供 软件 、 硬 件 与 服务 ， 并 由 网 络 浏览 器 或 轻 量 级 终端 软件 来 获取 
和 使 用 服务 ; 即 服务 从 局 域 网 向 Internet 迁 移 》 终端 计算 和 存储 向 云端 迁移 ; 


从 商业 的 视角 看 ， 云 计算 是 以 GOogle 为 代表 的 “Internet 时 代 ” 和 以 微软 /Intel 为 代表 
的 “PC 时 代 ” 之 间 两 个 时 代 的 竞争 ;这 个 过 程 将 是 逐步 的 、 长 期 的 但 呈 加 快 的 趋势 ; 


云 计 算 好 比 是 从 古老 的 单 台 发 电机 模式 转向 了 电厂 集中 供电 的 模式 。 它 意味 着 计算 能 
也 可 以 作为 一 种 商品 进行 流通 全 就 像 电 一 样 ， 取 用 方便 ， 费 用 低廉 。 


0 570 


技术 视角 : 云 计算 = 计算 /存储 的 网 络 





应 用 服务 API 云 能 力 服务 API 
集群 管理 并 行 处 理 自动 管控 K 





ZAR” IR — 
云 平 台 软 件 


| zaas 
处 理 的 服务 器 和 存储 


连接 数 以 万 计 
服务 器 的 以 太 交 换 机 
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云 计算 与 传统 的 单机 和 网 络 应 用 模式 相 比 ， 具 有 如 下 特点 : 


虚拟 化 : 这 是 云 计算 最 核心 的 特点 ， 包 括 资 源 虚拟 化 和 应 用 虚拟 化 。 每 一 个 应 用 部 署 的 
环境 和 物理 平台 是 没有 关系 的 。 通 过 虚 执 平 全 进行 管理 达到 对 应 用 进行 扩展 、 迁 移 、 备 份 。 

动态 可 扩展 : 通过 动态 扩展 虚拟 化 的 层次 达到 对 应 用 进行 扩展 的 目的 。 可 以 实时 将 服务 
器 加 入 到 现 有 的 服务 器 集群 中 ， 增 加 计算 能 

按 需 部 署 ， 用 户 运行 不 同 的 应 用 需要 不 同 的 资源 和 计算 能 力 。 云 计算 平台 可 以 按照 用 户 
的 需求 部 署 资源 和 计算 能 

高 灵活 性 : 现在 大 部 分 的 软件 和 硬件 都 对 虚拟 化 有 一 定 支持 ， 各 种 [资源 〈 例 如 软件 、 硬 
件 、 操 作 系统 、 存 储 网 络 等 ), 通过 虚拟 化 ， 放 在 云 计 算 虚 拟 资源 池 中 进行 统一 管理 。 同 时 ， 
能 够 兼容 不 同 硬件 矿 商 的 产品 ， 兼 容 低 配 置 机 器 和 外 设 而 获得 高 性 能 计算 。 

高 可 靠 性 : 虚拟 化 技术 使 得 用 户 的 应 用 和 计算 分 布 在 不 同 的 物理 服务 器 上 面 ， 即 使 单 点 
服务 器 崩溃 , /仍然 可 以 通过 动态 扩展 功能 部 署 新 的 服务 器 ， 保 证 应 用 和 计算 的 正常 运转 。 

高 性 价 比 、 云 计算 采用 虚拟 资源 池 的 方法 管理 所 有 资源 ， 对 物理 资源 的 要 求 较 低 。 可 以 
使 用 廉价 的 PC 组 成 云 ， 而 计算 性 能 却 可 超过 大 型 主机 。 
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云 计算 是 商业 模式 和 技术 理念 的 统一 K 


云 平台 


“On-Demand” 的 商业 模式 分 布 式 和 并 行 软 件 系统 
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“On-Demand” 商 业 模式 ， 即 按 需 服 务 模式 4 用 户 所 需要 的 应 用 软件 和 数据 都 位 于 云 
中 ， 用 户 使 用 客户 端 按照 自己 的 需求 访问 所 要 的 应 用 。 云 服务 提供 商 同 样 按照 客户 的 需求 提 
供 相应 的 服务 ， 和 收 到 相应 费用 。 
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云 计算 产生 的 技术 背景 、 


AZ 从 人 围绕 计算 机 转变 到 计算 机 围绕 人 
软件 工程 一 改 长 期 以 来 面向 = 转 。 

机 器 、 语 言 的 主机 的 形态 ， 

转 而 面向 需求 、 网 络 和 服 

务 。 
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云 计 算 的 产生 ， 首 先 源 于 信息 革命 50 多 年 来 计算 设施 的 变迁 : 从 60 年 代 的 大 型 机 ， 到 70 
年 代 的 小 型 机 ， 到 80 年 代 的 个 人 电脑 和 局 域 网 和 % 再 到 ?0 年 代 对 人 类 生产 和 生活 产生 了 深刻 影 
响 的 桌面 互联 网 ， 以 及 目前 大 家 所 高 度 关 注 的 移动 互联 网 、 无 处 不 在 的 网 络 ， 计 算 设施 不 断 
地 由 单机 向 网 络 变迁 。 通 信和 网 络 的 发 展 速度 比 以 摩尔 速度 为 代表 的 计算 速度 发 展 更 快 ， 这 
种 变化 是 云 计 算 能 够 生根 发 芽 的 土壤 s 

其 次 ， 软 件 工程 40 年 来 也 发 生 了 很 大 变化 : 70 年 代 ， 人 们 把 程序 设计 中 的 流程 图 看 得 很 
重要 ，80 年 代 开始 面向 对 象 ,*20 年 代 面 向 构件 ， 现 在 我 们 面向 领域 、 面 向 服务 。 软 件 工程 一 
改 长 期 以 来 面向 机 器 、 面 向 语言 和 面向 中 间 件 等 面向 主机 的 形态 ， 转 为 面向 需求 和 服务 等 面 
向 网 络 的 形态 ， 真 正 实现 了 软件 即 服 务 ， 这 是 软件 工程 的 大 转身 ， 服 务 将 会 成 为 云 计算 下 软 
件 开发 的 基本 样式 。 


第 三 ， 半 个 世纪 以 来 ， 人 机 交互 方式 也 在 逐渐 发 生 改 变 ， 从 主要 以 键盘 的 字符 界面 交互 
为 主 ， 发 展 到 后 来 鼠标 的 图 形 界 面 ， 再 到 后 来 触摸 、 语 音 、 手 势 等 ， 各 种 各 样 便捷 的 交互 方 
式 使 人 围绕 计算 机 转 的 时 代 已 经 过 去 ， 现 在 ， 计 算 机 需要 围 着 用 户 转 ， 用 户 越 来 越 只 需要 天 
注 于 核心 业务 并 不 需要 成 为 计算 机 或 [的 “业余 工程 是”， 这 也 正 是 云 计 算 给 用 户 在 利用 IT 
设施 的 方式 上 所 市 来 的 重要 改变 。 
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云 计算 产生 的 推动 因素 \ 


低 成 本 投入 、 高 性 能 
获得 、 更 好 用 户 体验 


虚拟 化 技术 、 分 布 
与 并 行 计 算 、 互 联 
网 及 WEB 技 术 
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需求 推动 
o 政 企 客户 的 信息 化 需求 强烈 ， 但 向 时 朗 求 低 成 本 投入 、 高 性 能 获得 ; 
o 个 人 用 户 的 互联 网 、 移 动 互联 网 应 用 需求 强烈 ， 追 求 更 好 用 户 体验 。 
技术 进步 
。 虚拟 化 技术 、 分 布 与 并 行 示 算 、 互 联网 及 WEB 技 术 的 发 展 与 成 熟 ， 使 得 基于 互联 网 
提供 包括 IT 基 础 设施 关 开 发 平台 、 软 件 应 用 成 为 可 能 ; 
o 宽带 技术 及 用 户 发 展 》 使 得 基于 互联 网 的 服务 使 用 模式 逐渐 成 为 主流 。 
商业 模式 转变 
。 少数 云 计算 的 先行 者 (例如 Amazon 的 Iaos) 的 云 计算 服务 已 开始 运营 
o 市 场 对 云 计算 商业 模式 已 有 一 定 认可 ， 越 来 越 多 的 用 户 接受 并 使 用 云 计算 服务 


心 文件 到 Amazon EC2 (亚马逊 弹性 计算 云 ) 的 商业 化 应 用 ， 再 到 美国 电信 巨头 
AT&T (美国 电话 电报 公司 ) 推出 的 3ynoaptic Hosting (动态 托管 ) 服务 ， 云 计算 从 
节约 成 本 的 工具 到 盘 利 的 推动 器 ， 从 ISP (网 络 服务 提供 商 ) 到 电信 企业 ， 已 然 成 功 
地 从 内 置 的 IT 系统 演变 成 公共 的 服务 。 


o0 5210 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. 





0 520 


云 计算 部 署 模式 \ 


Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. A HUAWEI 








云 计 算 有 三 种 部 署 模式 : 私有 云 计算 、 公 有 云 计算 、 混 合 云 计算 。 

私有 云 计算 : 一 般 由 一 个 组 织 来 使 用 ， 同 时 由 这 个 组 织 来 运营 。 华 为 数据 中 心 属于 这 种 模 
式 ， 华 为 自己 是 运营 者 ， 也 是 它 的 使 用 者 入 也 就 是 说 使 用 者 和 运营 者 是 一 体 ， 这 就 是 私有 
公有 云 计算 : 就 如 共用 的 交换 机 志 样 ， 电 信 运 营 商 去 运营 这 个 交换 机 ， 但 是 它 的 用 户 可 能 
是 普通 的 大 众 ， 这 就 是 公共 云 。 

混合 云 计算 : 它 强 调 基础 设施 是 由 二 种 或 更 多 的 云 来 组 成 的 ， 但 对 外 呈现 的 是 一 个 完整 的 
实体 。 企 业 正 常 运营 时 ， 把 重要 数据 保存 在 自己 的 私有 云 里 〈 比 如 : 财务 数据 ) ， 把 不 重 
要 的 信息 放 到 公有 云 里 六 两 种 云 组 合 形成 一 个 整体 ， 就 是 混合 云 。 比 如 说 电子 商务 网 站 ， 
平时 业务 量 比较 稳定 六 自己 购买 服务 器 搭建 私有 云 运营 ， 但 到 了 圣诞 节 促销 的 时 候 ， 业 务 
量 非常 大 ， 就 从 运营 商 的 公有 云 租 用 服务 器 ， 来 分 担 节日 的 高 负荷 ;但 是 可 以 统一 的 调度 
这 些 资源 ， 这 样 就 构成 了 一 个 混合 云 。 


HI 
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e laaS (Infrastructure as a service) 

基础 设施 即 服务 ， 提 供给 消费 者 的 服务 是 对 所 有 基础 设施 的 使 用 ， 包 括 计 算 、 存 储 、 网 
络 和 其 它 的 计算 资源 ， 用 户 能 够 部 署 和 运行 任意 软件 ， 包 括 操作 系统 和 应 用 程序 。 消 费 者 不 
需要 管理 或 控制 任何 云 计 算 基础 设施 ,* 但 能 控制 操作 系统 的 选择 、 存 储 空间 、 部 署 的 应 用 ， 
也 有 可 能 获得 网 络 组 件 ( 例 如， 防火 墙 ) 负载 均衡 器 等 ) 的 控制 。Amazon EC2 是 laas 的 典型 
代表 。 
e PaaS (Platform as a service) 

平台 即 服务 ， 提 供给 消费 者 的 服务 是 部 署 在 云 计 算 基 础 设施 上 的 应 用 程序 开发 平台 (B 
如 Java，.Net 等 ) 。 客 户 不 需要 管理 或 控制 底层 的 云 计算 基础 设施 ， 但 能 控制 部 署 的 应 用 程序 
开发 平台 。 Microsoft Azufe 是 PaaSs 的 典型 代表 。 


e SaaS (Software.as a Service) 


软件 即 服 务 > 提供 给 消费 者 的 服务 是 运行 在 云 计算 基础 设施 上 的 应 用 程序 ， 如 CRM、 
ERP, OA. Salesforce online CRM 就 属于 SaaS。 


除 此 之 外 还 有 另外 一 种 模式 : Daag， 即 Data as a service， 是 一 种 以 数据 存储 为 服务 内 
容 的 服务 模式 。 
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在 业界 ， 云 计算 的 部 署 形态 主要 有 两 种 。 一 种 是 大 分 小 ， 另 一 种 是 小 聚 大 。 


大 分 小 是 指 通过 虚拟 化 技术 ， 对 性 能 强大 的 物理 机 资源 进行 虚拟 化 ， 形 成 可 动态 调整 分 
配 的 计算 、 存 储 、 网 络 资源 池 。 这 种 方式 的 关键 技术 主要 包括 虚拟 化 、 虚 拟 机 监控 、 虚 拟 机 
调度 与 迁移 ， 主 要 适用 于 资源 可 时 分 复 用 的 场景 。Amazon EC2 业 务 是 大 分 小 形式 的 典型 代 
表 。 

小 聚 大 指 的 是 ， 把 多 个 性 能 较 低 的 物理 资源 ， 通 过 一 定 的 软 硬 件 方式 ， 形 成 逻辑 上 性 能 
强大 的 物理 资源 。 一 个 对 资源 需要 较 大 的 任务 ， 可 以 分 配 到 各 个 小 的 物理 机 进行 处 理 。 这 种 
方式 主要 涉及 任务 分 解 与 调度 Ss, 分 布 式 通信 总 线 、 全 局 一 致 性 等 技术 。Google 是 小 聚 大 的 典 
型 厂家 。 
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虚拟 化 实现 了 IT 资 源 的 逻辑 抽象 和 统一 表示 ,在 大 规模 数据 中 心 管理 和 解决 方案 交付 方面 
发 挥 着 巨大 的 作用 ， 是 支撑 云 计 算 伟大 构想 的 最 重要 的 技术 基石 。 采 用 虚拟 化 技术 对 计算 、 
存储 、 网 络 等 物理 资源 进行 虚拟 化 ， 形 成 资源 池 对 用 户 提供 按 需 服 务 。 
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虚拟 存储 精简 置 备 是 一 种 通过 以 灵活 的 按 需 方式 分 配 存储 空间 来 优化 存储 利用 率 的 方 

。 精 简 置 备 与 传统 模式 〈 称 为 厚 置 备 ) 截然 不 同 : 厚 置 备 预 先 提供 大 量 存储 空间 以 满足 未 
ZAFERE, 但 是 空间 可 能 一 直 未 被 使 用 ,这 样 会 导致 无 法 充分 利用 存储 容量 ; 精简 置 备 
可 以 为 客户 虚拟 出 比 实际 物理 存储 更 大 的 存储 空间 ， 只 有 写 入 数据 的 存储 空间 才 会 为 之 真正 
分 配 物理 存储 ， 未 写 入 的 虚拟 存储 空间 不 占用 物理 存储 资源 ， 从 而 提高 存储 利用 率 。 虚 拟 存 
储 精 简 配 置 基于 虚拟 磁盘 级 别提 供 s-/ 管 理 员 可 以 按 “ 普 通 ”格式 或 “精简 ”格式 分 配 虚拟 磁 
盘 文 件 。 通 过 将 虚拟 磁盘 设 汶 “精简 ”配置 ， 虚 拟 存储 管理 为 虚拟 磁盘 在 数据 存储 上 分 配 存 
储 空间 ， 在 开始 时 仅 交 付 存 储 数 据 所 需 的 存储 空间 ， 并 不 交付 已 经 分 配 但 并 未 使 用 的 存储 空 
间 ， 并 且 随 着 虚拟 磁盘 上 数据 量 的 增加 而 增加 空间 供应 量 。 当 所 有 分 配 空间 都 已 经 交付 时 ， 
“精简 ”磁盘 与 “普通 ”磁盘 没有 差异 。 


存储 无 关 : 虚 拟 存储 精简 配置 与 操作 系统 和 硬件 完全 无 关 ， 因 此 只 要 使 用 虚拟 镜像 管理 系 
统 ， 就 能 提供 虚拟 存储 精简 配置 功能 


容量 监控 :提供 数据 存储 容量 预警 ， 可 以 设置 阅 值 ， 当 存储 容量 超过 阅 值 时 发 出 告警 。 


空间 回收 : 提供 虚拟 磁盘 空间 监控 和 回收 功能 ， 当 虚拟 磁盘 使 用 了 一 段 时 间 ， 分 配 空间 
较 大 而 实际 使 用 空间 较 小 时 ， 可 以 通过 磁盘 空间 回收 功能 回收 已 经 分 配 交付 但 不 在 使 用 的 空 
间 。 当 前 支持 NTFS 格 式 的 虚拟 机 磁盘 回收 。 
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e CPU QoS 
o 预 留 百 分 比 : 控制 虚拟 机 获得 的 最 低 计 算 能 力 ， 其 值 为 虚拟 机 CPU 配置 值 与 预 留 量 
的 乘积 。 
o 限制 百分比 : 控制 虚拟 机 获得 的 最 大 计算 能 力 ， 其 值 为 虚拟 机 CPU 配置 值 与 限制 量 
的 乘积 。 
° 内 存 Qo5 


支持 设置 预 留 百分比 : 控制 虚拟 机 最 低 可 获取 的 物理 内 存 ， 其 值 为 虚拟 机 内 存 配 置 值 与 
预 留 量 的 乘积 。 


° 网 络 QoS 


采用 虚拟 交换 机 支持 网 络 QoS (带宽 限 速 及 优先 级 ) ， 采 用 智能 网 卡 实现 虚拟 接口 最 大 
带宽 的 速率 限制 。 
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动态 资源 调度 (DRS) : 动态 分 配 和 平衡 资源 ,从 用 智能 调度 算法 ,根据 系 统 的 负载 情况 ， 
对 资源 进行 智能 调度 ， 达 到 系统 的 负载 均衡 ,保证 系统 良好 的 用 户 体验 。 


动态 资源 调度 策略 针对 集群 (Clusten) 设置 ， 支 持 负载 均衡 策略 。 


负载 均衡 调度 策略 中 ， 可 以 设置 调度 阐 值 、 定 义 策略 生效 的 时 间 段 。 在 策略 生效 的 时 间 
段 内 ， 如 果 某 主机 的 CPU、 内 存 负载 国 值 超过 调度 阔 值 ， 系 统 就 会 自动 迁移 一 部 分 虚拟 机 到 
其 它 CPU、 内 存 负载 低 的 主机 中 保证 主机 的 CPU、 内 存 负载 处 于 均衡 状态 。 


。 应 用 场景 
本 特性 应 用 于 计算 资源 的 负载 均衡 和 节能 减 排场 景 。 
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。 资源 整合 提高 利用 率 


利用 虚拟 化 技术 ， 实 现 资源 的 弹性 伸缩 。 每 合 服务 器 虚拟 出 多 人 台 虚 拟 机 ， ee 
务 器 只 能 给 某 个 业务 独占 的 问题 ; 可 通过 灵活 调整 虚拟 机 的 规格 (CPU, AFS) ， 增 加 虚 
A et hi 一 定量 的 物 
理 内 存 资源 虚拟 出 更 多 的 虚拟 内 存 资 源 ,) 可 以 创建 更 多 的 虚拟 机 。 


。 有 自动 调度 ， 节 能 减 排 
于 策略 的 智能 化 、 自 动 化 资源 调度 ， 实 现 资源 的 按 需 取 用 和 负载 均衡 ， 消 峰 填 谷 ， 达 

二 夜 
晚 基于 时 间 策 略 进行 负载 整合 ， 将 不 需要 的 服务 器 天 机， 最 大 限度 降低 耗 电量 。 

节能 减 排 即 动态 电源 管理 (DPM) 可 以 优化 数据 中 心 的 能 耗 。 开 启 DPM 后 ， 当 集群 中 虚拟 
机 使 用 资源 比较 低 时 ， 可 以 聚合 虚拟 机 到 少量 主机 ， 并 关闭 其 它 无 虚拟 机 运行 的 主机 ， 实 现 
节能 减 排 。 当 虚拟 机 所 需 资 源 增加 时 ，DPM 动 态 上 电 主 机 ， 确 保 提供 足够 资源 。 
。 数据 集中 ， 信 息 安全 

FAURE, ， 数 据 分 散在 各 个 业务 服务 器 上 ， 可 能 存在 某 单 点 有 安全 漏洞 的 情况 。 部 署 云 
系统 后 ， 所 有 数据 集中 在 系统 内 存放 和 维护 ， 并 提供 以 下 网 络 传输 、 系 统 接 入 、 数 据 安全 、 
趋势 防 病毒 软件 等 安全 保障 。 
AAEN, ERRE 

对 于 一 个 大 型 企业 ， 传 统 办 公设 备 是 人 手 一 台 PC 机 ， 如 果 PC 发 生 故 障 ， 需 要 IT 人 员 对 发 
生 故障 的 PC 逐一 进行 维护 。 从 故障 报修 ， 到 IT 故障 排除 将 耗费 大 量 人 力 和 时 间 。 而 应 用 云 
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we 提高 利用 率 自动 高 度 ， 节 能 减 排 
bt: 数据 集中 管控 
数据 可 被 用 户 自 
由 存 


< 


传统 [平台 云 平台 
数据 集中 ， 信 息 安全 高 效 维护 ， 降 低 成 本 
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桌面 办 公 方 式 ， 员 工 的 办 公 系 统 和 数据 都 在 云端 ,= 前 端 免 维护 ， 相 比 传统 维护 方式 将 节省 大 
量 人 力 和 时 间 。 
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. 华为 云 计 算 解 决 方案 
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华为 FusionCloud 云 解决 方案 


FusionAccess FusionCloud 


在 虚拟 化 平台 上 直接 一 体 机 上 部 署 VD 应 Ç 


部 署 VDI， 形 成 标准 用 形成 VDI 一 体 机 

桌面 云 解决 方案 
SERIE HSE M 
安装 FusionSpFiere 软 
形成 一 体 机 解决 方 


pe 
. a 不 定 。 是 
RL FusionSphere 解 过 六 案 虚拟 化 能 力 的 基 
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华为 目前 可 提供 Fusionsphere( 基 . 础 设施 虚拟 化 )、FusionCube( 一 体 机 )、 
FussionAccess( 桌 面 云 ) 三 种 云 计算 解决 方案 FusionSphere 基 础 设施 虚拟 解决 方案 是 其 
它 解 决 方案 的 基础 ， 实 现 对 物理 基础 设施 的 虚拟 化 。 在 特定 硬件 形态 上 预 装 FusionSphere 软 件 
可 形成 FusionCube 一 体 机 解决 方案 ， 实 现 业 务 快速 部 署 。 在 FusionCube 或 Fusion9phere 的 基础 
上 部 署 VDI(Virtual Desktop Infrastructure), + A] R p FusionAccess R HZ ÉPR A R.o 
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Fusionsphere 解 决 方案 通过 在 服务 器 上 部 署 虚 拟 化 软件 ， 将 硬件 资源 虚拟 化 ， 从 而 使 一 
物理 服务 器 可 以 承担 多 人 台 服 务 器 的 工作 。 通 过 整合 现 有 的 工作 负载 并 利用 剩余 的 服务 器 以 部 
署 新 的 应 用 程序 和 解决 方案 ， 可 以 实现 较 高 的 整合 率 。 


解决 方案 包括 FusionCompute 和 FusionManager 两 软件 组 件 。 


FusionCompute 软 件 组 件 主要 包括 YRM、 主 机 组 件 ， 实 现 虚 拟 化 物理 资源 ， 向 数据 中 心虚 
拟 化 提供 虚拟 机 服务 。 


FusionManager 软 件 组 件 ; 主要 包括 IRM (Integrated Resource Management 集成 资源 管 
FH) 、SSP(Self-service Provisioning 自动 发 放 )、AME(Automatic Management Engine 自动 运 
Æ), IAM(Identity and Access Management 身份 和 访问 管理 )、Uportal( Unified Portal 统一 
Portal), IDB (intelligent data base) | CSB(Common Service and Bus 公共 服务 与 总 线 )、 
UHM((unified hardware/management 统 一 硬件 管理 ) 等 组 件 。 作 为 数据 中 心虚 拟 化 的 管理 软 
件 ， 管 理 虚拟 化 资源 、 硬 件 资源 ， 并 提供 服务 管理 等 功能 。 


FusionManagér 通 过 SNMP 接 口 向 上 级 网 管 上 报告 警 ， 计 算 、 存 储 和 网 络 设备 可 以 通过 
SNMP、TPMI 或 SSH 接 入 FusionManager。 


同时 ，FusionManager 从 虚拟 化 软件 FusionCompute 获 取 虚 拟 化 资源 配置 、 告 警 等 信息 ; 
虚拟 化 软件 根据 FusionManager 的 指令 ， 对 虚拟 机 进行 管理 。 
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FusionCube 一 体 机 解决 方案 ， 硬 件 上 集 针 算 、 存 储 、 交 换 于 一 体 ， 通 过 预 装 
FusionCompute 、FusionManage、FusionStorage 软 件 ， 实 现 硬件 资源 的 虚拟 化 和 统一 
管理 。 

FusionCube 作 为 虚拟 化 一 体 机 ， 是 一 个 开放 的 、 可 扩展 的 系统 。 通 过 FusionCube 的 统一 资 
源 管 理 、 应 用 自动 部 署 等 特性 ， 帮 助 用 户 简单 、 快 速 实现 不 同 云 应 用 的 部 署 和 维护 管理 。 

用 户 可 根据 其 业务 需求 ,在 FusionCube 上 定制 开发 、 部 署 、 更 新 或 管理 业务 应 用 。 这 些 
应 用 包括 简单 的 单机 应 用 、 复 杂 的 集群 应 用 等 ， 如 Exchange、SharePoint、ERP (Enterprise 


Resource Planning) /CRM (Customer Relationship Management) 、VDI (Virtual Desktop 
Infrastructure) ~ SQL Server. 
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桌面 云 解 决 方案 - FusionAccess S 
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华为 桌面 云 解决 方案 是 基于 华为 FusionCube 或 FusionSyphere 的 一 种 虚拟 桌面 应 用 ， 通 
过 在 云 平台 上 部 署 软 、 硬 件 ， 使 终端 用 户 通过 瘦 客 户 端 (TC) 或 者 其 他 任何 与 网 络 相连 的 设 
备 来 访问 跨 平台 的 应 用 程序 ， 以 及 整个 客户 桌面 。 


华为 桌面 云 解决 方案 重点 解决 传统 PC 办 公 模 式 给 客户 带 来 的 如 : 安全 、 投 资 、 办 公 效 率 
等 方面 的 诸多 挑战 ， 适 合金 融 、 大 中 型 企 事业 单位 、 政 府 、 呼 叫 中 心 、 营 业 厅 、 医 疗 机 构 、 
军队 或 其 他 分 散 /户外 /移动 型 办 公 单 位 5 


华为 桌面 桌面 云 解决 方案 逻辑 架构 包括 : 
。 硬件 资源 


提供 部 署 桌 面 云 系 统 相关 的 硬件 基础 设施 ， 包 括 服务 器 、 存 储 设备 、 交 换 设 备 、 机 架 、 
安全 设备 、 防 火 墙 * 配 电 设 备 等 。 


。 虚拟 化 基础 平 合 

根据 虚拟 桌面 对 资源 的 需求 ， 把 桌面 云 中 各 种 物理 资源 虚拟 化 成 多 种 虚拟 资源 的 过 程 。 
。 云 计 算 基 础 平台 

云 计 算 基 础 平台 包含 资源 管理 和 资源 调度 两 部 分 : 

o 云 资源 管理 指 桌面 云 系统 对 用 户 虚 拟 桌 面 资源 的 管理 。 可 管理 的 资源 包括 计算 、 存 


储 和 网 络 资源 等 。 
o 云 资源 调度 指 桌 面 云 系统 根据 运行 情况 ， 将 虚拟 桌面 从 高 负载 物理 资源 迁移 到 低 负 
载 物理 资源 的 过 程 。 
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桌面 云 解决 方案 - FusionAccess 
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。 虚拟 桌面 管理 层 

负责 对 虚拟 桌面 使 用 者 的 权限 进行 认证 ， 保 证 虚拟 桌面 的 使 用 安全 ， 并 对 系统 中 所 有 虚 
拟 桌 面 的 会 话 进行 管理 。 
。 接 入 和 访问 控制 层 

用 于 对 终端 的 接 入 访问 进行 有 效 控制 ， 包 括 接 和 网关、 防火墙 、 负 载 均衡 器 等 设备 。 


运营 维 管 系统 包含 业务 运营 管理 和 OM 管理 两 部 分 : 
o 业务 运营 管理 完成 桌面 云 的 开户 、 销 户 等 业务 发 放 过 程 。 
o OM 管 理 完 成 对 桌面 云 系统 各 种 资源 的 操作 维护 功能 。 


。 云 终端 
用 于 访问 虚拟 桌面 的 特定 的 终端 设备 ， 包 括 瘦 客 户 端 、 软 终端 、 移 动 终端 等 。 
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O 总 结 


云 计算 的 概念 

云 计 算 的 部 署 模式 与 商业 模式 
云 计 算 的 关键 技术 
华为 云 计算 解决 方案 





Copyright © 2013 Huawei Technologies Co., Ltd. All rights reserved. A HUAWEI 


0 5390 


@ 思考 题 


l. 网 盘 属于 云 计 算 商业 模式 中 的 哪 一 种 ? 
2. 结合 华为 FusionSphere 解 决 方案 ， 谈 谈 云 计算 的 价值 有 哪些 ? 
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。 多 选 题 
1、 云 计算 的 部 署 模式 有 哪 几 种 ? (  ) 


2、 云 计算 的 商业 模式 有 哪 几 种 ? ( ) 
A, laas 


B, PaaS 
C, SaaS 


D, Daas 
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IX 


1 ABC 


2. ABCD 
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判断 题 
1、 华为 数据 中 心 属于 公有 云 ( ) 
2、 华 为 FusionCube 解 决 方案 集 计 算 、 存 储 、 网 络 于 一 体 。 ( ) 


K 
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华为 职业 认证 通过 者 权益 
通过 任 一 项 华为 职业 认证 ， 您 即 可 在 华为 在 线 学 习 网 站 (htfp;//earning.huawei.com/cn) 享有 如 下 特权 : 
。 ”1、 华 为 E-learning 课程 学 习 
o AR: 所 有 华为 职业 认证 E-Learning 课 程 ， 扩 展 您 在 其 他 技术 领域 的 技术 知识 
方式 : 请 提交 您 的 “华为 账号 ”和 注册 账号 的 “email 地 址 ”到 Learning@huawei.com Æ5EfR Re 
华为 培训 教材 下 载 
AR: 华为 职业 认证 培训 教材 + 华为 产品 技术 培训 教材 ， 覆 盖 企 业 网 络 、 存 储 、 安 全 等 诸多 领 
方式 : BREJE IMA, HA “ENEN-AREN , ERARE TRA PM 
华为 在 线 公 开课 (LVC) 优 先 参与 
AR: 企业 网 络 、UC&C、 安 全 、 存 储 等 诸多 领域 的 职业 认证 课程 ， 华 为 讲师 授课 ， 天 班 A 数 有 限 
方式 : 开 班 计划 及 参与 方式 请 详 见 LVC 排 期 : 


http://support.huawei.com/learning/NavigationAction!createNavi#nailid]=®16 
学 习 工 具 eNSP 
ENSP [Enterprise Network Simulation Platform), 是 由 华为 提供 的 免费 的 6] 坟 展 的 、 图 形 化 网 络 仿 





真 工具 。 主 要 对 企业 网 路 由 器 和 交换 机 进行 硬件 模拟 ， 完 美 呈现 真实 设备 实景 了 同时 也 支持 大 型 网 络 
模拟 ， 让 大 家 在 没有 真实 设备 的 情况 下 也 能 够 进行 实验 测试 。 
另外 , 华为 建立 了 知识 分 享 平台 华为 认证 论坛 。 您 可 以 在 线 与 华为 技术 专家 交流 技术 ， 与 其 他 考生 分 享 考试 
经 验 ， 一 起 学 习 华为 产品 技术 。_(_ http://support.huawei.comyeaePimunity/bbsy/list 2247.html ) 
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